Почему количество найденных объявлений не соответствует количеству в выдаче на страницах?

Question

[Влад M]

При поиске по сайтам недвижимости таких как циан, авито, яндекс недвижимость - пишет что найдено к примеру 50 000 объявлений, а по факту в результатах выдачи гораздо меньше.
Не могу понять где остальные или этот счётчик показывает сколько всего было объявлений?

Comments

[Максим Грищенко]

------

Answer 1

[Evgen]

Обычно он показывает сколько всего в базе, но дальше, например 100й страницы не пускает просто и все.

Comments

[Влад M]

Да - именно так.
В этом-то и вопрос почему или где хранятся остальные данные и можно ли к ним получить доступ.

[Evgen]

Данные хранятся в базах у сервиса, почему не хочет вам отдавать? Да ровно потому-что обычные люди не ходят дальше 10й страницы и выкладывать их - значит отдавать парсерам.
Используйте фильтры, разбивайте запрос на подзапросы, чтобы уменьшать количество объектов за один запрос.