Как авторизоваться и спарсить сайт?

Question

[Илья Бугаец]

Хочу написать своего бота для электронного журнала, но я даже не могу пройти начальный этап(парсинг)
Мне нужно войти на сайт https://riso.sev.gov.ru/authorize и спарсить страничку с оценками
Но вот в чем подвох. После выполнения кода с авторизацией мне возвращает другую страницу
Решил спарсить страничку с регистрацией и ответ точно такой же как и с авторизацией

import requests
from bs4 import BeautifulSoup
session  = requests.Session()

UserAgent = "Mozilla/5.0 (Windows NT 5.1) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/69.0.3497.100 Safari/537.36"

html = session.get('https://riso.sev.gov.ru/authorize', headers={'User-Agent': UserAgent, 'Upgrade-Insecure-Requests': '1'})

print(html.text)

Comments

[Даниил Шевкунов]

Ну значит страница входа генирится с помощью JS

[Илья Бугаец]

Даниил Шевкунов, тогда как спарсить оценки?

[soremix]

После выполнения кода с авторизацией

Приложите

[Илья Бугаец]

soremix,

authorization = session.post('https://riso.sev.gov.ru/authorize', headers={'User-Agent': UserAgent}, data = {'login':'login','password':'pass'})

[soremix]

Илья Бугаец, неправильный эндпоинт, неправильный данные для входа.

Как минимум так должно быть

authorization = session.post('https://riso.sev.gov.ru/ajaxauthorize', data = {'username':'login','password':'pass', 'return_uri': '/'})

[soremix]

Илья Бугаец, хотя даже не так, а в multipart/form-data

data = {'username': (None, 'login'),
        'password': (None, 'pass'),
        'return_url': (None, '/')}

authorization = session.post('https://riso.sev.gov.ru/ajaxauthorize', files=data)

[Илья Бугаец]

soremix, спасибо

[soremix]

Илья Бугаец, работает?

[Илья Бугаец]

soremix, да

Answer 1

[soremix]

Неправильно передавался запрос. Правильный вариант:

data = {'username': (None, 'login'),
        'password': (None, 'pass'),
        'return_url': (None, '/')}

authorization = session.post('https://riso.sev.gov.ru/ajaxauthorize', files=data)

Смотрите, какой трафик идёт через F12 - Network в браузере. Затем просто повторяем запрос