Пытаюсь парсить сайт, страница генерируется из нескольких запросов к серверу, в одном из них есть нужная информация в JSON.
Использую selenium, scrapy, scrapy_splash.
Как получить ответ сервера из интересующего запроса?
Если отдельно генерирую необходимый запрос, сервер его отвергает.
Или мониторить все запросы (ответы) на странице с помощью вышеуказанных решений.
Допустим страница https://bsr.sudrf.ru/bigs/showDocument.html#id=6c1... по материалам&from=p&r={"type":"MULTIQUERY","multiqueryRequest":{"queryRequests":[{"type":"Q","request":"{\"mode\":\"EXTENDED\",\"typeRequests\":[{\"fieldRequests\":[{\"name\":\"court_case_result_date\",\"operator\":\"B\",\"query\":\"2017-10-01T00:00:00\",\"sQuery\":\"2017-10-04T00:00:00\"},{\"name\":\"court_subject_rf\",\"operator\":\"EX\",\"query\":\"Алтайский край\"}],\"mode\":\"AND\",\"name\":\"common\",\"typesMode\":\"AND\"}]}","operator":"AND","queryRequestRole":"CATEGORIES"}]},"sortOrder":"desc"}
Интересует ответ в showDocument.action