Как можно заблочить пагинацию сайта в файле robots.txt?

Question

[pdatu]

Как можно заблочить пагинацию сайта в файле robots.txt?
Вот пример стр. site.ru/dokumentalnoe-kino/9-7.html

Answer 1

[Natan]

pdatu почитайте про использование директивы Disallow, там нет ничего сложного и приведены примеры.

Comments

[pdatu]

дело в том что 9-7.html меняются в зависимости от страницы может быть и 5-7.html и 15-7.html вот нужно чтобы все эти числа что в конце закрывались роботсом

[Aborrol]

site.ru/dokumentalnoe-kino/* запретить, а страницу которую нужно например site.ru/dokumentalnoe-kino/index.html разрешить.

[pdatu]

попробую . Списибо

[Natan]

pdatu: Можете попробовать блокировать индексирование ненужных страниц при помощи мета-тегов, просто при генерации страниц пагинации добавлять им: <meta name="robots" content="noindex, nofollow"/> Если сайт работает на wordpress вот здесь описано решение.

[Natan]

pdatu: если мой ответ был Вам полезен, можете отметить его как решение. :)
Удачи!