Адрес типа domen.ru/... попадает в индексацию — чинить или редирект?

Question

[herprogrammist]

Вопрос относительно работы со ссылками типа: domen.ru/.... -- т.е. мы можем прописать после domen.ru/...

Смысл именно в .... после слеша. Почему-то поисковики иногда индексируют эти страницы, и они являются дублями главной страницы.
Что лучше сделать в этом варианте?

Правильно ли понимаю, что
В худшем случае - ошибка сервера
В среднем варианте: вернет главную страницу
В лучшем варианте: 404 ошибка.

Примеры:
https://www.mvideo.ru/... - 404 страница не найдена
https://www.ulmart.ru/... – открывается главная страница сайта
https://www.dns-shop.ru/... - страница не найдена

Comments

[Aleksandr Ataakgayev]

В этом случае, если робот видит, что это дублекат, то он помечает его таким флагом и потом перестаёт иедексировать. Можно для робота задать конфигурацию в файле robots.txt. Почитайте пожалуйста об этом файле. Там можно указать какие урлы должны попадать под индексацию в поисковиках, а какие нет. Это очень легко конфигурить и инфы об этом море.

Answer 1

[Ринат Хайсман]

Для таких урлов на сервере надо делать 301 редирект, через некоторое время страницы выпадут из индекса.

Answer 2

[Александр]

Разбираем....

В худшем случае - ошибка сервера

- Тот кто делал веб-сайт идиот. Это значит что программа рушиться. Аналог - Close program, BSOD. Отказ в обслуживании не должно быть.

В среднем варианте: вернет главную страницу
В лучшем варианте: 404 ошибка.

- На твое усмотрение. Страницы нет. Ты определяешь что надо показать пользователю:
а) Страницу что пользователь попал на не существующую ссылку.
б) Главную или иную страницу (страницу ввода пароля).

Почему-то поисковики иногда индексируют эти страницы, и они являются дублями главной страницы.

Тут нужны "SEO оптимизаторы" (именно в кавычках). Это же прекрасно когда твой сайт находиться на 100 страницах поисковика и выдает одно и тоже, и если на первых страницах, то пользователь никогда не дойдет до конкурентов ))) ))). Например, для роботов поисковых систем и для пользователей выдавать разный контент. Как пользователь буду ругать такой сайт и понижать карму ))).

Comments

[profesor08]

Как пользователь буду ругать такой сайт и понижать карму

Где подобное я могу проверить?

[Александр]

profesor08, Только после темного туннеля когда выйдешь на свет тебя спросят - жил ли ты честно? )))

Не знаю. Отзывы о фирме...