Как написать бота для автоматической отправки сообщений в чате на веб странице (без Selenium)?

Question

[Mark Adams]

Необходимо написать бота на Python для общения в чате. Особая логика общения не нужна, по сути, нужно чтобы бот тупо написал все сообщения по сценарию с определенной задержкой. Регистрация в чате не нужна, капчи нет. Есть опыт парсинга html. В какую сторону копать?

Answer 1

[Mark Adams]

Grab: docs.grablib.org/ru/latest/grab/forms.html

Answer 2

[Rou1997]

Если без Selenium, Phantom.js и т.п., то копайте в сторону HTTP-запросов и парсинга JSON и того же HTML, если там AJAX - используйте сниффер - Wireshark, Charles, Fiddler, любой по вкусу, только если чат активно разрабатывается то серверную часть будут все время изменять, в том числе намеренно вам мешать, и бот придется обновлять, может придется все-таки использовать браузер, он более стабилен к изменениям.

Comments

[Mark Adams]

Понял. Вот пример чата: moscowchat.megafon.ru/website/public/login.jsp. Можешь показать пример как найти форму и отправить сообщение? Потому что пока не особо понятно что делать? ЧТо вообще есть отправка сообщение? Это POST?

[Mark Adams]

Так можно?: docs.grablib.org/ru/latest/grab/forms.html

[Rou1997]

Илья Кметь: Да, это в любом случае HTTP-запрос, в данном случае как раз AJAX (JavaScript), поэтому отслеживать нужно сниффером, наверное я его не зря в ответе упомянул, затем такой же запрос нужно отправить с помощью urllib2, requests и т.п. А с помощью grab не получится, она не поддерживает JavaScript, это только для обычных форм, так что либо сниффер и HTTP, либо Selenium/Phantom.js то есть полноценный встроенный браузер.

[Mark Adams]

Думаю через Grab пробовать: docs.grablib.org/ru/latest/grab/forms.html

[Rou1997]

Илья Кметь: Никакая библиотека не заменит сниффер, использование сниффера - это новый уровень в разработке клиентских приложений, не пользоваться сниффером все равно что не пользоваться отладчиком, с таким же успехом и все IDE можно выбросить и код писать в блокноте Windows, ведь и так можно добиться чтобы работал, решайте сами.

[Mark Adams]

Понял. А есть туториал для тупых? Python. Какой один сниффер посоветуешь?

[Rou1997]

Илья Кметь: Python тут ни при чем, сниффер это программ для ОС, если Windows то проще всего Fiddler, туториала не видел, и искать не собираюсь, тупым или ленивым все равно нечего делать в реверс-инжиниринге.

[Mark Adams]

Rou1997: ясно

[Mark Adams]

Корону не урони только

[Rou1997]

Илья Кметь: Так кто тебе мешает? Изучи снифферы и тоже с короной будешь!

[Mark Adams]

Rou1997: Времени нет. Firebug максимум

[Rou1997]

Илья Кметь: Не знаю может ли он сниффить, в принципе можно и средствами разработчика в браузере обойтись, но они не так удобны, и нет возможности свои собственные запросы отследить и сравнить, если нет времени - обратитесь к специалисту приготовив деньги, а что, с Grab ничего не вышло?