Как скрыть от ботов-поисковиков алиас сайта с помощью robots.txt?

Question

[denn]

Имеется сайт site.ru с одной директорией, но к нему прикручен алиас(CNAME) SUB.site.ru. Как этот алиас скрыть от поисковиков с помощью robots.txt?

Answer 1

[Refguser]

Никак. Роботс лишь рекомендация. И только сообщит ботам о наличии чего-то если они об этом не знали.

И вообще размешать субдомены в подкаталогах основного домена - плохая идея.

Comments

[denn]

да там не разные сайты) а один в одной директории, но только с разными доменами. Получается выход только через nginx конфиг пилить?

[Refguser]

denn, нужно переносить в отдельный каталог вне основного домена и открыть доступ только по условию (по IP или др.).

Answer 2

[Сергей Миронов]

Поддерживаю, замечание потому как поддомен это отдельный домен третьего уровня. У него свой pr и тиц.
То есть смотрите если у вас есть сайт в домене
Василий.пупкин
Вы можете сделать форум на своем сайте и у Вас два варианта. Первый:
Василий.пупкин/форум
Либо:
Форум.василий.пупкин
В первом случае все ссылки будут вести на один домен но разной уровень вложенности страниц.
Во втором случае основной домен второго уровня это один ресурс, а Ваш форум это домен третьего уровня.