Как работать с ajax в Python?

Question

[Владислав]

Приветствую!
Появилась надобность парсить сайт, использующий ajax.
В качестве инструментов сначала были выбраны: requests,bs4.
Хочу избавиться от bs4, если смогу загружать json напрямую - по запросу.
Как это сделать? Как найти нужный запрос? И как собственно получить ответ по запросу?

Answer 1

[sim3x]

Как это сделать?

from json import loads

Как найти нужный запрос?

ручками в консоли браузера

И как собственно получить ответ по запросу?

import requests

Comments

[Roman K]

В добавок, у requests модели Response есть метод .json(), так что from json import loads даже не нужен.

[Владислав]

>ручками в консоли браузера
Хмм, но я не шарю в js в принципе!!! Как отыскать запрос?? Как понять, что это запрос???

[sim3x]

Владислав: вкладка networks
включить фильт
указать XHR

ну и потихоньку учить js

[Владислав]

sim3x: *facepam*
ладно, спасибо и на том)

[Roman K]

Владислав: В PyCharm есть инструмент для API: Tools -> Test RESTful Web Service. Может, это поможет?

[Владислав]

Roman Kitaev: мне не хочется ради одного сайта ставить DE

[Roman K]

Владислав: Зачем мне знать о вашей лени?

[Владислав]

Roman Kitaev: ну я как бы намекнул, что предложенное вами решение..кхм.. на УГ смахивает мальца

[Roman K]

Владислав: PyCharm - внегласный стандарт, если вы разрабатываете что-то серьёзнее скриптика на раз. Если PyCharm для вас - УГ, вам лучше не заниматься Пайтоном или уже начинать писать свою среду разработки.

Answer 2

[Владислав]

Как и сказал sim3x , нужный запрос нашелся в режиме отладки, в пункте Networks.

Comments

[Дмитрий]

может всетаки расскажешь что к чему а то както не правильно люди помогают а ты пишкшь что все сделал а как не написал

Answer 3

[asd111]

selenium или phantomjs