Как закрыть от индексации URL которые заканчивается цифрами в robots.txt?
На сайте на товары можно заходить по разным ссылкам, поэтому нужно запретить к индексации дубли.
Как закрыть от индексации URL которые заканчивается цифрами? вида site.ru/item/1081261/ с слеш и без (могут быть как 5 так 6 или 7 цифр ) и оставить открытыми для индексации site.ru/item/1081261/dnevnik-sportivnoy-devochki-v-korobke-na-magnitah-s-lentami