Есть сайт, яндекс.вебмастер показывает примерно следующее:
Загружено: 236 632 страниц
В поиске: 50 151 страниц
И это нормально, страницы на сайте постоянно появляются и устаревают. Все что нужно проиндексировано, и имеет хорошие позиции в поиске. Хорошая перелинковка и все вообще нормально.
Сейчас переписываем портал полностью и встал вопрос.
Нужен ли файл sitemap? При том что в нем будет судя по всему ооооооочень много всего)
В данный момент такой файл есть, но нужен ли он. Не лишняя ли он нагрузка вообще для сервера(во время создания и обновления).
Или может стоит сделать укороченную версию содержащую только основные разделы.
В общем вопрос-дискуссия.
upd:
(с)
https://yandex.ru/support/webmaster/indexing-optio...
Нужно ли создавать файл Sitemap?
Обычно робот Яндекса узнает о страницах сайта, переходя по ссылкам со страницы на страницу. В большинстве случаев этого достаточно для полного индексирования сайтов. Однако робот может не найти некоторые страницы или неверно определить их важность: проблемными обычно становятся динамически создаваемые страницы или страницы, на которые можно попасть только пройдя по длинной цепочке ссылок. Файл Sitemap помогает решить эти проблемы.
Я бы не сказал, что это настоятельная рекомендация
