Переход на другую страницу с помощью requests?

Question

[arthur_sites]

Я авторизовался на сайте с помощью requests. Как мне теперь авторизованным перейти на другую страницу сайта чтобы парсить уже ее? Спасибо.

Answer 1

[danis_2014]

with requests.Session() as session:
    session.post(url_0, data)  # авторизуешься
    response = session.get(url_1)  # получаешь данные с другой страницы сайта

Session позволяет использовать одни кукки, то есть сайт будет знать, что вы уже авторизовались.

Comments

[Дмитрий]

а если я без сесии просто авторизуюсь потом получаю адрес нужной страницы это считаться не будет?
ip='192.168.1.1' #input('Введите ip: ')
wifi='/st_wlan.php'
r_login=requests.get(ip, auth=('', ''))
r_wifi=ip+wifi

[danis_2014]

Дмитрий: скорее всего нет. Но не вижу смысла не использовать сессию, это не усложнит задачу. Можешь так:

session = requests.Session()
ip = "192.168.1.1"
wifi = "/st_wlan.php"
r_login = session.get(ip, auth=('', ''))
r_wifi = ip + wifi

[Дмитрий]

danis_2014: я извиняюсь но не могли бы вы помочь мне в решении проблемы общения с браузером Как пасить сайт в котором контент выводиться с задержкой? в гугел и документацию не посылать тк там был там ничего не нашел хотелось бы именно на примере чтобы понять как общаться с браузером get post

[danis_2014]

Дмитрий: к сожалению я не знаю как ее решить, сам еще начинающий)

[danis_2014]

Дмитрий: хотя можете попробовать так:

session = requests.Session()
login = session.post(url, data) # авторизуемся
get = session.get(url1) # заходим на нужную страницу
time.sleep(5) # ждем 5 секунд
response = session.get(url1) # получаем обновленные данные

Это может и не сработать, если на сайте для этого js используется

[Дмитрий]

danis_2014: это не сработает)) потомучто при обновлении данные заного запрашиваются)) пробовал))

[MisterParser]

Дмитрий, используйте phantomjs.

Answer 2

[lega]

docs.python-requests.org/en/master/user/advanced