Как безопасно для SEO запустить бету новой версии сайта?

Question

[Zhw]

У нас есть domain.com и мы хотим протестировать новый шаблона сайта на домене beta.domain.com. Домен beta.domain.com нужен только временно, потом он будет удален и новый шаблон (после тестирования) поставлен на основной домен domain.com.

Какой будет правильный алгоритм действий, чтобы не повлиять негативно на SEO основного домена domain.com?

Странно, но в интернете особо не нашлось полезных мануалов, кроме вот этой темы: https://webmasters.stackexchange.com/questions/820...

Где даны следующие советы:

1. Положить robots.txt с флагом noindex в beta.domain.com
2. Прописать теги сanonical с beta.domain.com на domain.com

С первым пунктом вроде все логично, но зачем второй нужен? Если у нас и так noindex там, то реально ли нужен canonical?

Есть ли еще какие-то рекомендации или ссылки по тому как правильнее весь этот процесс устроить?

Кстати, в Google Webmasters Tools добавлять beta.domain.com нужно?

Comments

[Zhw]

Есть такая вот статья: https://support.google.com/webmasters/answer/93710 где сказано, что robots.txt не нужен.

Answer 1

[Даулет]

Все зависит от того как вы собираетесь использовать бета версию вашего сайта.
Если вы уже запустили сайт и хотите чтобы он был основным, то тогда вам необходимо - проставить canonical'ы, в Вебмастерах прописать переезд. Сделать редирект на beta.domain.com.
Если же вы хотите чтобы основным сайтом оставался domain.com - тогда вам необходимо на домене beta.domain.com - поставить rel="noindex nofollow" и в роботсе закрыть сайт от индексации

Comments

[Zhw]

Спасибо за ответ!

Второй вариант. Точнее даже beta.domain.com будет работать только временно. После завершения тестирования домен beta будет удален, а шаблон поставлен на основной domain.com.

В итоге:

1. Все ссылки на beta.domain.com делаем rel="noindex nofollow"
2. На beta.domain.com в robots.txt ставим флаг noindex
3. Сanonical'ы не пишем нигде

Все верно?

[Даулет]

Да, верно в head.
<meta name="robots" content="noindex, nofollow">

[Zhw]

Спасибо. Случайно нашлась вот такая статья от Google https://support.google.com/webmasters/answer/93710 где сказано, что robots.txt не нужен. Может вам тоже будет интересно знать это.

[Даулет]

Zhw, да знаю, раз уж закрывать сайт, так по всем фронтам=)

Answer 2

[Алексей Граченков]

Самый простой и эффективный способ закрытия поддомена от роботов:
1) Запоролить поддомен. Поддомен открывается по логину и паролю.
2) Не обязательно. Но, на всякий, из опыта работы с программистами, создать robots.txt для поддомена и прописать там:
User-agent: *
Disallow: /
# Запрещаем доступ к сайту всем роботам

Comments

[Zhw]

Спасибо за вариант! Но нам необходимо дать пользователям возможность заходить на бету без паролей.

[Алексей Граченков]

записи в роботсе должно хватить с головой) Два пункта это следствие 12 летнего опыта работы с программистами. Будете править роботс, смотрите внимательно чтобы они отличались, Роботс основного домена допускает обход роботов Поисковиков. Роботс поддомена дисалоу. Ещё нужно это отражать на зеркалах сайта, надеюсь редиректы с обычного протокола на шифрованный у вас уже сделаны. Так же и на вариант написания с www редирект на вариант с без www. Так же и на поддомене. А то из опыта работы с программистами были случаи, когда условно поддомен закрыт от индексации, на него выкладывается информация, а тот же вариант поддомена например с www отлично выкладывает в индекс, то что нажито не посильным трудом.

[Zhw]

Спасибо за ценный комментарий.

Answer 3

[Пума Тайланд]

это все фигня и работает не гарантированно
просто закрываешь паролем сайт и вуаля

Comments

[Zhw]

Спасибо за вариант! Но нам необходимо дать пользователям возможность заходить на бету без паролей.

Answer 4

[Александр Денисов]

Если правильно понимаю, то речь идёт о том, чтобы сайт был доступен для пользователей, чтобы полить на него трафик и протестировать конверсию. Тогда, как и говорили выше, закрывайте в роботсе через

User-agent: *
Disallow: /

Таким образом вы запрещаете сканирование страниц сайта поисковым системам. Этого достаточно. noindex запрещает индексацию. Важно не путать сканирование и индексацию. Если стоит запрет сканирования, то роботы даже не будут видеть noindex, т.к. не будут открывать код этой страницы.