Можно ли изменять некоторые моменты в отображение сайта специально для поисковых ботов?

Question

[Александр]

Сразу скажу что речь идёт об индексации SPA на vue.js и в первую очередь именно о индексации googl'а.
Я использую анимацию загрузки во время которой выполняются некоторые подготовительные работы. В целом сайт может быть отображён немедленно без этой анимации, но вероятно в таком случае будут видны некоторые подтормаживания интерфейса в первые 1-2 секунды, да и вообще с анимацией загрузки всё выглядит более опрятно. Так что для обычных пользователей я хочу отображать эту анимацию. Но вот для поискового бота эта анимация означает то что он скорее всего не дождётся её окончания и вместо контента сайта - увидит её, что как я понимаю совсем не хорошо с точки зрения SEO. В результате пришёл к варианту когда я отключаю анимацию загрузки при срабатывание /bot|googlebot|crawler|spider|robot|crawling/i.test(navigator.userAgent). При этом судя по search console - google теперь видит непосредственно контент сайта и всё хорошо.

Теперь вопрос. Будет ли google как-то штрафовать меня за то что контент для поискового бота не совсем совпадает с контентом для пользователей или это входит в рамки допустимой коррекции?

Comments

[alex-1917]

пожалуй, это отличный удар в спину для всех этих новомодных штучек)))
хотя мне VUE понравился, в частности, понравилось, как они лихо вытащил на страничку 3000 товаров))) айпад конечно тут же сдох, я про декстоп...
насчет с пеной у рта что быстрая работа с юзером - хз, на джиквери реакция точно такая же мгновенная - и товары к корзинке обновить и вид списка перестроить, хз...
когда начал с VUE работать, первые двое суток только им и занимался, затягивает!!..)))

[Александр]

alex-1917, а vue тут по большому счёту не при чём. Вопрос актуален даже для сайтов на нативном js.

[alex-1917]

LordGuard, мне мамка не разрешила ругаться...

[Александр]

alex-1917, ничего страшного, она не увидит.

Answer 1

[Boris Köln]

Можно ли изменять некоторые моменты в отображение сайта специально для поисковых ботов?

- Все ли грибы можно есть?
- Все. Но некоторые только один раз в жизни.

https://ru.wikipedia.org/wiki/%D0%9A%D0%BB%D0%BE%D...

Answer 2

[Максим Тимофеев]

Можно ли изменять некоторые моменты в отображении сайта специально для поисковых ботов?

Можно поймать бан или пессимизацию за такие вещи.

Но вот для поискового бота эта анимация означает то что он скорее всего не дождётся её окончания и вместо контента сайта - увидит её, что как я понимаю совсем не хорошо с точки зрения SEO

Надо смотреть по факту, но в целом сейчас поисковики отлично дружат с js и подгружаемым контентом. Заводите себе профайл в google webmaster и смотрите реально как идет индексация. И только потом принимаете меры. Скорее всего у Вас не будет проблем с индексацией, так что проблема надуманная, а вот бан может быть вполне реальным.

Comments

[Александр]

Как же тогда обычно поступают с индексацией сайтов с анимацией загрузки?

[Максим Тимофеев]

LordGuard, расширил ответ

[Александр]

Я уже посмотрел через google search console. Google показывает анимацию вместо контента.

[Максим Тимофеев]

LordGuard, Контент он индексирует или нет? То что он видит анимацию, в том числе, это понятно.

[Александр]

Максим Тимофеев, а вообще хочу подчеркнуть, что сервер никак не разделяет бота и пользователя, контент отдаётся одинаковый. Все различия проявляются только на стороне выполнения javascript.

[Максим Тимофеев]

LordGuard, Если контент индексируется нормально - нет смысла что-то еще делать. Если индексируется только анимация, то значит Ваши действия будут расценены как подмена контента - не обязательно, но многовероятно. Google зайдет не представляясь как бот и получит другой контент, далее автоматом примет меры.

[Александр]

Максим Тимофеев, ну вообще контент скрыт на время анимации, так что да - пока анимация не прошла google не увидит контент в DOM.

[Максим Тимофеев]

LordGuard, Вопрос: Почему Вы решили, что бот не дожидается окончания анимации? много лет назад, все что выводил js не индексировалось, но эти времена прошли. Так что вполне возможно, что бот индексирует и анимацию и появляющийся потом контент. Просто проверьте это.

[Александр]

Максим Тимофеев, если использовать функцию 'Просмотреть как Googlebot' в google search console с режимом 'получить и отобразить' - в результате он показывает мне скриншот на котором отображается анимация. Как мне проверить что именно google будет использовать при индексации?

[Максим Тимофеев]

Если есть реальные факты плохой индексации, а не домыслы, то советую почитать:
https://yandex.ru/search/?text=индексация%20динами...
Но я пока не вижу причин делать дополнительные танцы с бубном. И уж точно не стоит подменять контент.

[Александр]

Максим Тимофеев, пока что только домыслы, так как проект в стадии разработки.

[Максим Тимофеев]

LordGuard, Тогда не придумывайте проблему, там где ее может не быть, а вот то что Вы хотите сделать, называется "маскировка" и делать этого точно не стоит:
https://support.google.com/webmasters/answer/66355
Там же если глубже залезете есть советы на тему.

[Александр]

Максим Тимофеев, кстати у меня есть гипотетический вопрос. А вот если у меня на сайте анимация загрузки будет работать только на тех устройствах на которых поддерживается WebGL (ну например). На сколько я понимаю бот гугла с WebGL скорее всего не умеет работать и соответственно у него анимации не будет, а у почти у всех обычных пользователей - будет.
Это тоже будет считаться "маскировкой"?

[Максим Тимофеев]

LordGuard, Нет. Главное что бот и замаскированный бот увидели одно и тоже.
Но сама идея SPA для SEO не очень верная. SPA обычно делают ставку на другие источники трафика - smm, контекст, сарафан и т.д.
Если надо seo то стоит сделать обычный сайт, внутри которого есть SPA. Проблем будет меньше. Поддерживать проще.

Answer 3

[Пума Тайланд]

Что то вы слишком много решаете за бота, дождется он или не дождется, зайдите ботом через вебмастер и посмотрите как обстоят дела

Comments

[Александр]

Дак я уже посмотрел))

[Александр]

Я ничего за него не решаю. Это факт - он не ждёт окончания анимации загрузки и появления основного контента.

[Максим Тимофеев]

LordGuard, ждет, значит видит контент

[Александр]

Максим Тимофеев, не ждёт он судя по search console.

Answer 4

[Kirov77]

Всем привет, да мы использовали html копию страниц, куда отправляли робота Яндекса и гугл. Когда с ними консультировались, они нам сказали что если не будет различий между версией для робота и версии для людей, то ничего страшного не произойдет. То же самое говорит и google ссылку лень искать сорри. :)