Как разрешить/запретить индексацию определенных страниц в дереве?

Question

[Albert Kazan]

Хочу разрешить например обход страниц по правилу Allow: /dis/*только номера*. Значит я не хочу чтоб поисковик лазил по страницам вроде /dis/overview или /dis/respect и т.п., а только по /dis/47 и так далее.

Далее, есть страницы с /material/example/example. Пусть такие страницы индексируются, но кроме самого /material/
Разрешено /material/5/all, /material/17
Запрещено /material

Answer 1

[Dimonchik]

только номера никак

а по (2) пишите ваш вариант