@4upik

Как закрыть от индексации URL которые заканчивается цифрами в robots.txt?

На сайте на товары можно заходить по разным ссылкам, поэтому нужно запретить к индексации дубли.

Как закрыть от индексации URL которые заканчивается цифрами? вида site.ru/item/1081261/ с слеш и без (могут быть как 5 так 6 или 7 цифр ) и оставить открытыми для индексации site.ru/item/1081261/dnevnik-sportivnoy-devochki-v-korobke-na-magnitah-s-lentami
  • Вопрос задан
  • 376 просмотров
Пригласить эксперта
Ответы на вопрос 2
dimonchik2013
@dimonchik2013
non progredi est regredi
никак, роботс очень примитивен и умеет только во вложенность директорий
т.е. site.ru/item/* - это пожалуйста

ставьте с неугодных страниц canonical на правильные
Ответ написан
Комментировать
xmoonlight
@xmoonlight
https://sitecoder.blogspot.com
301-й редирект по User-Agent и всё.
Ответ написан
Комментировать
Ваш ответ на вопрос

Войдите, чтобы написать ответ

Похожие вопросы