Нашёл в вебмастере яндекс раздел Индексирование - Все страницы - Скачать таблицу / архив
Скачал файл - эксель, в котором, как сказано в мануале яндекса содержится инфа о том как видит робот страницу.
Описание файла:
Архив содержит статистику по страницам, которые были добавлены в Sitemap или на основе которых были созданы Турбо-страницы. Это поможет узнать, как меняется состояние страниц в результатах поиска в настоящий момент:
— HTTP-код, полученный роботом во время последнего обхода;
— статус страницы в поиске;
— дата последнего посещения страницы роботом;
— наличие Турбо-страницы для URL;
— наличие URL в файле Sitemap;
— адрес страницы для перенаправления;
— значение атрибута rel="canonical";
— заголовок страницы;
— содержимое метатега Description.
Вопрос
В этом файле все страницы моего сайта имеют характеристики: