Библиотека lxml создаёт свой запрос и не хранит сессию?

Question

[zilevsky]

При запросе на сайт через Session() я сохраняю куки. Затем при помощи lxml разбираю полученный текст страницы на предмет токена прописанного в форме запроса.
Так им образом собираю все данные для последующего запроса.
Но как выяснилось при разборе страницы через lxml мне подкидывает новый токен.
Получается что lxml создаёт свой запрос и он не обращает внимания на session объявленный выше?

Сколько не искал информацию по сессиями библиотеки lxml, ничего найти не смог.

Answer 1

[Dimonchik]

вот только что написал ответ:

https://qna.habr.com/q/1119656

нет никаких сессиий, не существует, это абстракция: на физическом уровне есть POST /GET запросы и куки

для их освоения придумали POSTMAN (ну и прочие insomnia), попрактикуйся

да, в requests и bs есть "сессии", для удобства, синтаксический сахар, магия - не нужно на такое полагаться

Comments

[zilevsky]

Спасибо за быстрый ответ.
Почитал. Понял))
Но тут сессия скорее тот момент что в одном «сеансе» мы хотим получить куки и токен.
Это выглядит так что типа мы загружаем страницу, собираем с неё данные и не перезагружая делаем с ней дальнейшие действия.
Конкретно в моём случае на сайте есть форма которая по кнопке грузит таблицу. Есть ендпоинт на который можно отправить post запрос, но для него нужны куки и токен сгенерированные при загрузке пустой страницы с формой.
Получается мне нужно в том же сеансе отправить эти данные дальше.

[Dimonchik]

тогда BS или Selenium , там же наверно без JS никак, судя по описанию