Залогиниться на Хабре (и др. сайтах) через Python (urllib)?

Question

[couatl]

Как залогиниться на Хабре через Python-библиотеку urllib.

Видел в Q&A «как логиниться вконтакте через get-запросы», потому вопрос — как самостоятельно находить способы залогиниться на других сайтах, а не спрашивать постоянно для каждого сайта в отдельности.

Answer 1

[robofox]

Установите себе http-сниффер. Если у вас firefox, рекомендую дополнение HttpFox.

Как узнать, какой запрос послать для логина:
Включаете сниффер, логинитесь на сайт(сниффер лучше включать непосредственно в момент логина, чтобы не забивать его лишними запросами), потом смотрите, что браузер передал серверу. Обычно это один POST-запрос, в полях которого можно найти логин и пароль. Такой же запрос нужно посылать скриптом.

Comments

[AlexP11223]

А как httpFox пользоваться?) Установил, перезапустил, включил начало работы со стартом браузера и все равно нигде его нет.

[robofox]

Внизу на панели дополнений должна появиться иконка.

[Optik]

Он чем то лучше фаербага в этом плане?

[robofox]

Он проще в использовании, особенно если нужно отловить только один запрос.

[couatl]

Удалось залогиниться вконтакте:
import urllib
import urllib2
urllib2.install_opener(urllib2.build_opener(urllib2.HTTPCookieProcessor))
params = urllib.urlencode({'email': '[e-mail]', 'pass': '123'})
request = urllib2.Request('http://vkontakte.ru/login.php', params)
f = urllib2.urlopen(request)
text = f.read().decode('utf8')
print text


А вот на хабре не выходит:
params = urllib.urlencode({'login': '123', 'password': '***'})
request = urllib2.Request('http://habrahabr.ru/ajax/auth/', params)


Answer 2

[un1t]

Отправляете запрос на логин POST или GET в зависимости от сайта. В ответе в headers смотрите Set-Cookie
и в следующие запросы отправляете с хидером Cookie (пример Cookie: xxx=yyy).
Прочитайте про токак как в HTTP устроены куки или посмотрите заголовки запров в фаербаге.

Answer 3

[Константин]

Selenium