Можно ли как-то запретить индексацию домена и всех его поддоменов сразу?

Question

[Сергей Горячев]

Есть у меня привычка, хранить сайты клиентов на своем демо-сервере.
И показывать удобней, и для разработки всегда нужно.
Но вот недавно заметил, что все сайты проиндексировались.
А некоторые еще и выбили из поиска сайты реальные)))
Вопрос в теме, можно ли как-то совсем запретить индексироватьт определенный домен?
Вместе с поддоменами.
Роботс знаю, но его нужно ложить постоянно в папку.
А это можно и забыть, или потом не удалить с сайта клиента.
В общем, может есть другое решение?

Answer 1

[mr_alex]

Если сайт на wordpress то можно запретить индексацию из админки.

Comments

[Сергей Горячев]

Неа, не WordPress, но даже если и так, это всё равно ручные действия, как файл robots.txt кидать, так и в админку лезть.

[mr_alex]

Sergey Goryachev: вот что пишет Яндекс: Индексирование сайта может быть запрещено либо по причинам технического характера (страницы содержат ошибки и их содержимое невозможно корректно проиндексировать или индексирование сайта запрещено в файле robots.txt) либо за использование недобросовестных приемов продвижения сайтов в поисковых системах (поисковый спам).

То есть сразу заливайте типовой robots.txt

Answer 2

[Ankhena]

Ну в смысле забыть изменить/удалить роботс?
Вы же не забываете, например, переписать настройки подключения к БД или добавить счетчики.

Может, удобнее через meta, например при сборке проектов?

Comments

[Сергей Горячев]

В том и фигня, что настройки подключения к БД у меня всегда совпадают. А счетчики я добавляю еще на стадии разработки))) Потом просто отправляю на сервер всё как есть.

[Ankhena]

Sergey Goryachev: Тоже руками: взять за правило удалять тестовые поддомены и сайты. Или ставить 301 редирект.

Answer 3

[Эвакуатор Эвакуаторов]

robots.txt disallow ...

Comments

[Сергей Горячев]

Это я знаю, думал, есть другое решение или нет. Видимо, нет.