Как запретить индексацию поддоменов поисковикам?

Question

[lexinti]

Уменя DLE, домен и поддомены привязаны к одной папке. Подскажите пожалуйста как с помощью .htaccess сделать так ,чтобы на поддоменах был запрет на индексацию,
то есть при загрузке файла "robots.txt" на поддоменах (sub1.site.ru,sub2.site.ru и т. д.) подгружался файл robots1.txt с текстом

User-agent: *

Disallow: /

а при загрузке файла "robots.txt" на главном домене (site.ru) подгружался файл robots.txt с нормальным контентом.

Answer 1

[dodo512]

RewriteCond %{HTTP_HOST}  ^(?>www\.|).+\.site\.ru$ [NC]
RewriteRule ^robots\.txt$ /robots_1.txt [L]

Comments

[lexinti]

спасибо

Answer 2

[Алексей Тутубалин]

На всех поддоменах надо создать файл

robots.txt

с содержимым

User-agent: *
Disallow: /
Host: sub.site.ru

и для верности можно на саб доменах в head добавить
<meta name="robots" content="noindex">

Comments

[lexinti]

мне нужно сделать robots динамическим, отдельно для поддоменов и домена, это очень важно

[Алексей Тутубалин]

lexinti, Так на под доменах то что я написал, а на основном оригинальных файл и всё

[lexinti]

Алексей Тутубалин, домен и поддомены привязаны к одной папки, у них один файл роботса на всех, и для того что бы для поддоменов и доменов был разный роботс нужно как то использовать htaccess

[Айнур Валиев]

директива Host устарела
https://webmaster.yandex.ru/blog/301-y-redirekt-po...