Как в robots.txt запретить к индексации дочерние страницы раздела?
Здравствуйте.
У меня есть страница вида: site.ru/клиенты/название_клиента.
Я в robots, пытаясь скрыть дочерние страницы раздела "клиенты" прописал следующую инструкцию: Disallow: /клиенты/, но при этом сам родитель тоже оказался скрытым. Как этого избежать и скрыть только наименование клиентов?
Делайте так:
Allow: /клиенты/$ - Разрешает индексацию только такого урла
Disallow: /клиенты/* - Запрещает индексацию все что после слеша
Проверьте через панель вебмастеров Гугл и Яндекс
Лайк, если помог)