Надо ли скрывать контент при разработке нового сайта?

Question

[dimsontm]

Делаю редизайн сайта, Создаю с нуля на тестовом домене. Весь контент старого сайта руками переношу на новый сайт. Старый сайт при этом работает. Могут ли возникнуть проблемы из-за одинакового контента на разных доменах в моем случае? Тестовый домен не раскручивался.

Answer 1

[Site Developer]

Могут ли возникнуть проблемы из-за одинакового контента на разных доменах в моем случае? Тестовый домен не раскручивался

Могут. И если боты имеют доступ, то вполне реально. Никакие роботсы и дисоловы/ноиндексы могут не помочь.
Ставь плагин maintenance, используй несуществующий домен (hosts) или паролируй директорию домена.

Comments

[dimsontm]

последнее не совсем понял

используй несуществующий домен (hosts) или паролируй директорию домена.

[Site Developer]

dimsontm: это 2 разных варианта (всего перечислил 3).
1. плагин maintenance,
2. создаёшь на хостинге домен: mycoolsite.dev . Прописываешь его в свой hosts (ссылку-то почитай).
3. Пароль на директория домена см в панели хостера или гуггли "базовая HTTP-авторизация". Это одно и тоже.
Скрин из IPS-панели:

Answer 2

[Natan]

dimsontm так новый домен вы используете для тестовой площадки или планируете туда переехать? Если не планируете перезжать, а просто тестите сайты там, то лучше будет запретить поисковикам ее индексировать. Можете использовать директиву Disallow, в robots.txt Сайты и без раскрутки могут в индекс попадать.

Comments

[dimsontm]

Использую для тестовой площадки. Домен сайта останется прежний, просто убьетя старая версия

[Natan]

dimsontm: тогда Disallow в robots.txt будет самым простым решением. Есть и другие способы закрыть контент от поисковых систем и индексации, но они далеко не всегда требуются.

Сайт на WP, в настройках чтения поставил галку "Попросить поисковые системы не индексировать сайт", а так же закинул в корень robot.txt и внутри пропсиал

User-agent: *
Disallow: /

Нормальное решение?))

Не самое надежное, но по-минимуму должно хватить, если сайты еще не были проиндексированы. SEO плагины, вроде yoast seo тоже не включайте на тестовой площадке, либо внимательно следите за настройками.

Answer 3

[dimsontm]

Сайт на WP, в настройках чтения поставил галку "Попросить поисковые системы не индексировать сайт", а так же закинул в корень robot.txt и внутри пропсиал

User-agent: *
Disallow: /

Посмотрел статистику по яндексу и гуглу. Роботы проиндексировали по 12 и 13 страниц сайта((( Как быть в таком случае?

Comments

[Фёдор]

Почему бы сразу не делать всё по-уму и не запустить сайт локально, а там уже хоть годами на нем кодить.
Кстати одна из причин возможно, потому что надо было назвать файл не robot.txt, а robots.txt

[dimsontm]

я назвал robots.txt все верно) А локально не все можно проверить. То есть на каком-то этапе все равно надо поднимать на какой-то из тестовых серверов всеж. Иначе проверять сразу на боевом как-то не круто имхо)