Как закрыть от индекса подраздел в robots.txt?

Question

[MazHaz]

Как правильно закрыть от индексации подраздел в robots.txt, но при этом что бы не закрывались внутренние разделы этого подраздела?
Например:
хттп//мой.сайт/catalog/natyazhnye-potolki/v-zal/
но не должен закрываться подраздел /v-zal/

Disallow: /natyazhnye-potolki/

так не работает

Все это нужно для эксперимента.

Answer 1

[Алексей Курилкин]

Disallow: /catalog/natyazhnye-potolki/$ #закрывает только страницу /catalog/natyazhnye-potolki/, без запрета внутренних страниц

Comments

[Николай]

спасибо добрый человек

Answer 2

[igorux]

Disallow: /natyazhnye-potolki/
Allow: /natyazhnye-potolki/v-zal/ #разрешён подраздел
Allow: /natyazhnye-potolki/*/ #разрешены все подразделы (url, в которых после «/natyazhnye-potolki/» есть ещё хотя бы один слэш)

Comments

[MazHaz]

не подходит, яндекс вебмастер пишет что разрешен в роботс


файл роботс на данный момент:

User-agent: *
Crawl-delay: 2
Disallow: /bc/
Disallow: /cart
Disallow: /profile/
Disallow: /auth/
Disallow: /consult/*
Disallow: /*?sort=
Disallow: /search/*
Disallow: /*?recNum=
Disallow: /city/*

Disallow: /*?isNaked=
Disallow: /*?category=
Disallow: /registration/
Disallow: /search/
Disallow: /*.pdf
Disallow: /*.xls
Disallow: /*.doc
Disallow: /*.ppt
Disallow: /*.txt
Disallow: /*.zip
Disallow: /*utm
Disallow: /*clid=
Disallow: /*nc_ctpl=
Disallow: /dileram/*
Disallow: /news/*
Disallow: /documents/*
Disallow: /calc/*
Disallow: /politika
Disallow: /spec
Disallow: /photogallery
Disallow: /natyazhnye-potolki/
Allow: /natyazhnye-potolki/v-zal/
Allow: /natyazhnye-potolki/*/

[igorux]

Disallow: /natyazhnye-potolki/$
#$ — знак окончания строки (url)

Пардон.

[igorux]

Директива Crawl-delay уже не поддерживается, хотя Яндекс за год так и не убрал её упоминание из помощи.

[MazHaz]

igorux,

User-agent: *
Disallow: /bc/
Disallow: /cart
Disallow: /profile/
Disallow: /auth/
Disallow: /consult/*
Disallow: /*?sort=
Disallow: /search/*
Disallow: /*?recNum=
Disallow: /city/*

Disallow: /*?isNaked=
Disallow: /*?category=
Disallow: /registration/
Disallow: /search/
Disallow: /*.pdf
Disallow: /*.xls
Disallow: /*.doc
Disallow: /*.ppt
Disallow: /*.txt
Disallow: /*.zip
Disallow: /*utm
Disallow: /*clid=
Disallow: /*nc_ctpl=
Disallow: /dileram/*
Disallow: /news/*
Disallow: /documents/*
Disallow: /calc/*
Disallow: /politika
Disallow: /spec
Disallow: /photogallery
Disallow: /natyazhnye-potolki/$

Сделать вот так?
если да, то все равно ответ положительный