Парсинг Python, как авторизоваться?

Question

[GizmoZzZ]

Добрый день.
Появилась необходимость в парсинге , и только начал изучать Питон. Сам парсер по шаблону написал , всё работает, но необходимо авторизоваться на сайте https://shop.bohnenkamp-russia.ru/ и собирать данные, ~ 98 страниц таблицы.
Пробовал requests но столкнулся с тем что url к которому обращаюсь постоянно меняется, и получаю ошибку Url is not def...
Подскажите как в моём случае можно авторизоваться. Заранее всем спасибо!

import requests

def autoriz():
session = requests.Session()
url = 'https://shop.bohnenkamp-russia.ru/customer/'
data = {'username':'******', 'password':'*******'}

print (requests.get(url)).text

def main():
autoriz()

if __name__ == '__main__':
main()

Comments

[GizmoZzZ]

Скрыл дабы вас не смущать , а по существу что - нибудь скажете ?

[GizmoZzZ]

Я и не говорю что вы что то обязаны, гуглил, яндексил и яху... везде описывают метод обращения к Url, но в моём случае он постоянно меняется https://shop.bohnenkamp-russia.ru/customer/account...aHR0cHM6Ly9zaG9wLmJvaG5lbmthbXAtcnVzc2lhLnJ1LyM=/ вот эта часть. Возможно есть методы как это можно обойти..

Answer 1

[Денис Казаков]

Вы создаёте экземпляр session, а запрос делаете вне сессии и не используете data.

Оф.документация гласит:

s = requests.Session()
s.auth = ('user', 'pass')
# необходимые заголовки, желательно сменить хотя бы User-agent
# иначе цель будет видеть вас как python requests и в 99% случаев блокировать
s.headers.update({'x-test': 'true'}) 

# both 'x-test' and 'x-test2' are sent
s.get('https://httpbin.org/headers', headers={'x-test2': 'true'})

Comments

[GizmoZzZ]

Денис, спасибо за ответ, но мой уровень владения Питоном = ~ 0,1 по 5 ти бальной системе.
Если вас не затруднит, можете расшифровать что мне в итоге нужно сделать, буду неимоверно вам признателен.