VicTHOR
@VicTHOR
(╮°-°)╮┳━━┳ ( ╯°□°)╯ ┻━━┻

Какой-нибудь ответ сервера закрыт от индексации?

Если я хочу создать пустой поддомен, а его директории спроксировать на разные проекты типа /munin, /cockpit, /nagios (кстати хорошая ли это идея?), можно ли как-то закрыть поддомен от роботов, не проксируя его на папку с robots.txt?
Просто не хочу, что-бы он был в списках на сайтах в выдаче "все поддомены сайта"
  • Вопрос задан
  • 86 просмотров
Решения вопроса 2
Stalker_RED
@Stalker_RED
У вас же там будет авторизация, да? То есть роботы дальше страницы авторизации не пройдут.
Если внешних ссылок на этот поддомен не будет, то они его и не найдут никогда.
не проксируя его на папку с robots.txt
зачем проксировать? Пусть у этого поддомена будет свой robots.txt с содержимым
User-agent: *
Disallow: /
Ответ написан
@zkrvndm
Веб-разработчик
Вы можете на суб доменах тупо выдавать пустую страницу с тегами noindex и nofollow, а также дополнительно прописать метатег http-equiv="refresh" и футболить всех ботов на основной домен. До кучи, можно еще в заголовках прописать HTTP/1.0 401 Unauthorized.
Ответ написан
Пригласить эксперта
Ваш ответ на вопрос

Войдите, чтобы написать ответ

Войти через центр авторизации
Похожие вопросы