Как прогрузить страницу средствами requests?

Question

[rusyska55011]

Необходимо спарсить таблицу на странице. На ней порядка 1000 строк, а при скачивании страницы получаю только 200, поскольку элементы подгружаются за скролом пользовтеля. Как прогрузить все 1000 строк и уже скачать страницу?

Answer 1

[soremix]

F12 -> Network. Фильтруем по XHR.
Скроллим страницу - смотрим, какие запросы отправляются, повторяем их