Как отправить запрос методом GET(ajax)?

Question

[himegood]

Добрый день.

Пытаюсь получить данные с сайта : https://www.okmarket.ru/customers/new_actions/c739...

С помощью библиотеки requests. В Network нашёл ссылку :

https://www.okmarket.ru/customers/new_actions/c739...
Если обратится напрямую, то параметры : sort=ASC&nav-products=page-2 не срабатывают.
Сайт подгружает с помощью ajax.
Как правильно сформировать ссылку, что бы получить данные 2,3,4 и т.д страницы. С помощью метода requests.

Comments

[Дмитрий Кузнецов]

почитайте про парсинг

[himegood]

Дмитрий Кузнецов, Спасибо. Вы очень помогли. А если по сути вопроса? Вы на сайт по ссылке заходили?

[Дмитрий Кузнецов]

himegood, так я вам и сказал что бы вы прочитали про парсинг. В частности про парсинг динамических данных.
Либо посмотрев вкладку Networks можно попробовать повторить подобные запросы.

[himegood]

Дмитрий Кузнецов, Я уже пробовал это. Данные на странице не меняются, если подставлять параметр page.

Answer 1

[ThunderCat]

Сайт подгружает с помощью ajax.

Ну так ищете на какой урл (и каким методом) отправляется аякс запрос, повторяете у себя такой же - профит.

Comments

[himegood]

Спасибо за ответ.
В том то и дело, ничего не происходит. Метод get url я написал в вопросе.

[Reaplay]

himegood, а вы просто адресную строку подставляете и ничего больше?
Посмотрите в сторону того, что летит в header запроса в сторону сервера.
Я, например, сталкивался с тем, что без определенного значения в Referer сервер отдавал не все данные.
Что-нибудь такое попробуйте или полностью повторите параметры из реального запроса.

session = requests.Session()
session.headers.update({'referer': 'Referer: https://www.okmarket.ru/customers/new_actions/c7391_8_regulyarnyy_katalog_nonfood_2022_vesennee_preobrazhenie/?sort=ASC&nav-products=page-2'})

[ThunderCat]

himegood,

В том то и дело, ничего не происходит. Метод get url я написал в вопросе.

Заголовки надо повторять такие же как в запросе из браузера, куки, метаданные, все как отсылает браузер. Тогда получите то что получает браузер.