Как в robots.txt закрыть от индексации url с определённым содержимым?

Question

[serhgons]

Всех приветствую. На моем сайте есть ссылки типа
https://мойсайт.ру/папка/vacancy/страница.html

Я хочу закрыть от индексации все страницы у которых в url содержится /vacancy/ как мне это сделать???

Answer 1

[mefik26]

Disallow: */vacancy/*

Comments

[serhgons]

Сегодня в поддержке яндекс скинули ответ что подойдет */vacancy
Подскажите какой вариант более точный по моему вопросу?

[mefik26]

Зависит от остальных урлов на Вашем сайте. Указанную страницу закроют оба правила. Но, например, если на сайте будет еще https://мойсайт.ру/папка/vacancy-new/страница.html то правило от ТП закроет и ее.

[serhgons]

mefik26, блин я ошибся, оказывается они мне скинули */vacancy/
подскажите а такое решение тоже верное? мне надо чтобы любой url который содержит vacancy папку был закрыт от индексации.

[mefik26]

Да, верное