Как частично закрыть от индекса /xfsearch/?

Question

[Александр]

Есть раздел на сайте https://site.ru/xfsearch/ как его закрыть от индекса в robots.txt, но не полностью? т.е чтобы /xfsearch/ не индексировался, а /xfsearch/year/ был в индексе. Если я сделаю так Disallow: /xfsearch/ будет правильно или нужно так /xfsearch/ ? Буду очень признателен за помощь!

Answer 1

[Дмитрий]

Disallow: /product/
Allow: /product/*

Вот так сделайте

Comments

[Александр]

Спасибо!