Как проиндексировать 10 МБ уникального контента (без попадания страниц пагинации в поисковую выдачу)?
Имеется 10 МБ уникального контента, который весь должен быть проиндексирован.
Пользователи, конечно, видят это все через пагинацию, фильтры и т.п, но хотелось бы чтобы Боты могли это все проиндексировать без пагинации и выдать одну единственную ссылку (на главную страницу) в поисковой выдаче.
Fetch as Google Bot отваливается где-то после 4 МБ контента, если просто поместить весь контент на одну страницу.