Гугл не хочет вносить в поиск страницы блога, что делать?

Question

[Александр Базаров]

Доброго времени суток! В общем решил я как-то прикрутить блог на свой сайт. Проблема заключается в том, что Гугл наотрез не хочет вносить новые статьи в индекс *часть старых живут успешно ). Страницы блога в карте сайта видит, ошибки не находит - при ручном запросе на индексирование - вроде как пишет, что скоро все появится, но ничего не происходит. Тем временем в Яндексе все ок, все страницы успешно публикуются, довольно оперативно.

Рубрики - канонические. Сами статьи нет.

В robots.txt запретов никаких нет:
User-Agent: *
Host: https://cliffe.ru
Sitemap: далее ссылка на карту

Сам блог здесь: https://cliffe.ru/blog



Товарищи знатоки, помогите советом пожалуйста. P.s. При нажатии на кнопку - проверить страницу на сайте - выходит следующее:

Answer 1

[Дмитрий]

1. Как давно отправили в индекс?

2. Некоторые статьи у вас вполне проиндексированы

3. На некоторых плагиат контента. Может быть стоит их все уникализировать?

4. И сайтмап так никто не делает. Вы выложили в роботсе аж 3 файла sitemp. У Вас WP. Добавьте плагин Yoast SEO и он сгенерирует правильный. Выложите в роботсе и вебмастерах одной ссылкой.

Comments

[Александр Базаров]

У меня SEOPress стоит, он сгенерировал 3 карты, т.к. одна с товарами, другая со страницами и 3 с записями. Дело в том, что все работало хорошо. К примеру где вы указали на плагиат - там указан источник, но как раз не в ней дело. Вот свежая - https://cliffe.ru/what-is-logo/ как добавил её, вручную сделал запрос на индексирование, спустя три дня еще раз и т.д. Или вот к примеру: https://cliffe.ru/colorgen/ - эти статьи писал сам, нигде не копировал тексты, они все равно не заходят.

[Александр Базаров]

Статья со шрифтами - она сразу залетела, но ей по-моему больше года

[Александр Базаров]

По sitemap, по сути не в них сейчас дело ведь, поисковики их 3шт верно считывают.

[Дмитрий]

Александр Базаров, Лучше поставьте тот плагин, что я указал. Или оставьте только одну карту - https://cliffe.ru/sitemaps.xml

[Дмитрий]

https://wp-kama.ru/id_803/pishem-pravilnyiy-robots...

[Александр Базаров]

Дмитрий, если менять плагин, придется все заголовки и дескришены переписывать, есть вероятность потерять позиции в выдаче пока все это дело заново проиндексируется. Если вся беда из-за карт сайта, почему ранее все работало хорошо? Яндекс повторюсь отлично заносит в индекс страницы.

[Zettabyte]

Дмитрий,

Вы выложили в роботсе аж 3 файла sitemp ... Или оставьте только одну карту

Если не возражаете, вклинюсь, чтобы поинтересоваться: а в чём именно проблема с несколькими файлами sitemap? Почему на ваш взгляд это плохо?

[Александр Базаров]

Дмитрий, Sitemap:
Правило Sitemap: example.com/sitemap.xml указывает роботу на файл с картой сайта в формате XML. Если у вас на сайте есть такой файл, то пропишите полный путь к нему. Таких файлов может быть несколько, тогда нужно указать путь к каждому файлу отдельно.

В вашей рекомендации так и указанно, что необходимо прописать все ссылки карт сайта

Answer 2

[Владимир Соловьёв]

Вне контекста вашего сайта: среди SEO специалистов наблюдается проблемы с индексированием в Google.

• проблемы внутри Google;
  
• в Google индексе достаточно информации, новое добавлять не спешит;
  
• недостаточно ссылок на сайт (не забывайте как работает основная концепция цитирование);
  
• недостаточное качество страниц;
  
• технические проблемы на сайте.
  

У вас странная структура сайта: есть /blog, но сами статьи лежат от /. По количеству страниц в индексе похоже проиндексирована большая часть сайта.

• site:cliffe.ru - 37 результатов;
  
• site:cliffe.ru inurl:/blog - 2 результата.
  

Ваши действия:

1. смотрите логи сервера, как часто ходит робот и дошёл ли он до нужных вам страниц;
   
2. проверьте сайт любым анализатором;
   
3. добавьте сайт в Ahrefs, там есть возможность подтвердить владение сайтом и пользоваться сервисом без ограничений, например запустить сканер, он подскажет ошибки;
   
4. проверьте скорость сайта
   
5. нарастите внешнюю ссылочную массу;
   
6. исправьте вложенность статей, они должны быть в отдельном "директории" /blog
   
7. проверьте совпадает ли контент на страницах намерениям пользователей
   
8. можете написать мне по контактам если, вдруг, я не допонял ситуацию
   

Можете убрать Host из robots.txt, он уже не нужен.

Comments

[Александр Базаров]

Спасибо за развернутый ответ. Структуру строил очень давно, сейчас глянул, реально путаница.

Было как:
Создана страница - записи (пустая) > далее в настройках > Чтение (страница записей) была указана эта же страница без наполнения. Шаблон архивных страниц имел виджет архивных постов, который вроде как считывал все записи, при навигации через меню, он также показывал что есть в рубриках.

Сейчас сделал следующее:
Убрал из настроек чтения страницу записей, Но заполнил блоговую основную страницу виджетами, далее уже шаблон архивных записей имеет теперь отдельный виджет.

Большое подозрение, что я снова мог что-то напутать, буду разбираться. Сайт на Elementor PRO

[Александр Базаров]

По расположению - от /

Настройки > Постоянные ссылки > Название записи https://cliffe.ru/sample-post/
выбрано это *

[Александр Базаров]

Если я правильно понял, необходимо сделать следующее: /%category%/%postname%/
И также указать префикс для рубрик?
Далее на все включить 301 редирект?

[Владимир Соловьёв]

Александр Базаров, необходимо, что бы поисковые системы явно видели, что есть страницы, сгруппированные по единому признаку (например, начинаются с /blog/). Видео по теме от специалиста.

В тонкости реализации в вашей CMS я не посвящен. И да, не забываем про 301, если структура меняется.