Как пропарсить сайт с Requests payload?

Question

[temamart]

Вообщем нужно пропарсить сайт, и пару деталей вообще в ступор бросают, что это за Requests payload, каким образом передать серверу эти данные и вообще что это такое, также пока не копал, но настаражевают еще два пункта X-GWT-Module-Base и X-GWT-Permutation. Буду рад хоть какой-то информации от знающих людей и в какую сторону хоть копать? Спасибо.

Comments

[Junior007]

Недавно написал парсер сайтов на c++, мой работает. Скинь почту или вк, можем списаться, мб помогу

Answer 1

[DuD]

request payload это просто тело запроса. Что в этом такого?
X-GWT-* это просто заголовки которые так же без проблем вставляются

Comments

[temamart]

Хорошо, а как это тело запроса отдать серверу что бы он исполнил его, вот к примеру есть у меня URL, есть headers, если брать python, то писал бы r = requests.post(URL, headers=headers), а как этот request payload передать?

[Александр Кошелев]

temamart, просто строкой можешь передать