Доброго времени суток, пользователи habr, решил углубиться в тему парсинга сайтов, посмотрел видео на ютуб. Решил попробовать написать код самостоятельно, но столкнулся с проблемой. Что статью не найду, никто не парсит сайт, на котором предметы подгружаются по спуску вниз страницы. В общем хочу спарсить названия/цены в магазине Steam. Упорядочил поиск так, чтобы осталось всего ~215 товаров. Но парсер записывает только первые 50 элементов магазина (потому что товары подгружаются по 50 элементов).
Залез в Network, в XHR запросы. Вижу, что каждые 50 элементов отправляется запрос query с параметром start=50, 100, 150, 200...
Но не понимаю что с этим делать. Подскажите? Спасибо! Какую библиотеку/ресурс использовать, может статью подкините? Я ничего не нашёл