Что выдавать поисковым роботам при индексировании страниц, которые ещё не перенесены на новый движок?

Question

[Александр Синицын]

На сайте куча статей, форум, объявления и прочее, буду менять движок. Но если буду переносить всё разом, то это сильно затянется. Плюс при переносе всё надо будет проверять и публиковать постепенно.

Хотелось бы запускать по-модульно... сделал модуль, данные загрузил, запустил, контент открыл по мере проверки. Что делать с поисковыми роботами, которые знают, что эти ссылки уже есть в поиске?

Answer 1

[Евгений Юдин]

1- как вариант настроить временный редирект 302 на страницу раздела статей
2- другой вариант- оставить старую версию сайта на тестовом поддомене например и сделать 302 редиректы туда
3- сначала перенести все статьи, потом заливать полностью готовый сайт на боевой (самый предпочтительный вариант)

Comments

[Александр Синицын]

Дополнил вопрос.

А что если выдавать на время разработки вместо 404... 503?

[Евгений Юдин]

Александр Синицын, тогда страница вылетит из индекса 100% и непонятно вернется ли на свои прежние позиции.

[Александр Синицын]

Евгений Юдин, А какую ошибку выдают при "На сайте технические работы"?

[Евгений Юдин]

Александр Синицын, 503

Но тут вопрос, хотите ли вы сохранить трафик, или отдать условно правильный код ошибки.

[Александр Синицын]

Евгений Юдин, Надо как-то сказать роботу "Братан, индексировать это пока не надо... тут люди работают, всё будет, но позже" ))

[Евгений Юдин]

3 и 2 вариант из моего ответа наиболее предпочтительные для сохранения трафика.

[Александр Синицын]

Евгений Юдин, Третий хотелось бы обойти. Второй, в принципе реализовать можно.

[Александр Синицын]

Евгений Юдин, А если домены разные при 302 это ничего?

[Евгений Юдин]

Александр Синицын, нормально

[Александр Синицын]

Евгений Юдин, Спасибо.

Answer 2

[Сергей Герасимов]

Вам необходимо создать в корне сайта файл robots.txt следующего содержания:

User-agent: *
Disallow: /

А после либо удалить его, либо настроить согласно канонам SEO

Comments

[Александр Синицын]

А на индексировании страниц и их позиции это не скажется?

[Сергей Герасимов]

Александр Синицын, так закрывайте то, что ещё нет в индексе. Лучше создать отдельный поддомен, например, dev с таким файлом robots.txt и на нем накатывать изменения дорелизные

[Александр Синицын]

Сергей Герасимов, Оно всё в индексе, сайту лет 8.

[Сергей Герасимов]

Александр Синицын, тогда только на поддомене создавать файл

Answer 3

[Александр Маджугин]

Так и оставить старые страницы на старом двжике и их пока и отдавать. В чем проблема-то?
Поисоковики "не знают" ничего про движок. Им контент важен.

Comments

[Александр Синицын]

В один домен мне их будет не сшить...

[Александр Маджугин]

Александр Синицын, почему? Есть же куча вариантов это сделать. В конце концов статическими их сделайте.