Индексация Ajax сайта стоит ли что-то делать?

Question

[Chvalov]

Как обстоят сейчас дела с индексацией Ajax (VUE) сайта, нужно ли что-то дополнительно делать или оставить как есть ?

Если все по прежнему плохо что посоветуете использовать: HtmlUnit, PhantomJS или _escaped_fragment_ и самому отдавать статический контент ?

Если посмотреть кэш гугла то блоки где весь контент подгружается с помощью Ajax отсутствует, думаю весь трафик от поисковых систем проксировать через PhantomJS, у кого есть такой опыт, как такой вариант ?

Answer 1

[tema_sun]

Так Vue.js же умеет SSR.

Comments

[Chvalov]

tema_sun за это я в курсе, но мне он не совсем подходит

Answer 2

[Chvalov]

Сделал так:
Поставил https://github.com/prerender/prerender
после чего отлавливаю всех поисковых ботов в Nginx по User Agent и отдаю им html страницу

Comments

[Lsh]

Всегда было интересно, что мешает ботам выдавать UA браузера? Делают ли они так? Если да, то как влияет несоответствие контента страницы при разных UA на её рейтинг?

[Chvalov]

Lsh, Гугл так и делает, если просмотреть страницу как Google bot то приходит два запроса с разными User-Agent

Если контент будет сильно разным то ПС может посчитать как клоакинг, но это в основном когда будет переспам в ключах

Answer 3

[profesor08]

Если контент подгружается, размести ссылку, при клике на которую откроется страница именно в том месте с конкретным контентом и так далее. Бот увидит ссылку, перейдет, обработает, увидит следующую, обработает и тд.

Answer 4

[iKest]

Google уже индексирует сайты как обычный браузер (с выполнением js), Яндекс тоже подтягивается...

Comments

[Chvalov]

iKest У гугла с этим пока очень плохо