Парсинг сайта, работаюшего на вебсокетах?

Question

[MrPakkard]

Здравствуйте.

Есть сайт - фронт на JS, обмен информацией с бэкэндом происходит через веб-сокеты. Необходимо написать парсер, который будет в режиме реального времени получать информацию от лица пользователя на этом сайте.

Никогда ранее не сталкивался с парсингом в реалтайме таких ресурсов, может, кто-нибудь подскажет в какую сторону смотреть?

Заранее спасибо.

Comments

[Модератор]

MrPakkard дорогой пользователь, настоятельно рекомендуем еще раз обратить самое пристальное внимание на п. 3.1 регламента работы сервиса (и, в особенности, на его последний абзац). В противном случае, ваши вопросы будут удаляться по причине тег-спама, а систематические нарушения приведут к блокировке учетной записи.

Answer 1

[hacker2001]

aiohttp (клиент) умеет подключаться через вебсокеты.

Comments

[MrPakkard]

Почитаю, спасибо :)

Answer 2

[Виктор]

phantomjs это по факту консольный браузер.
Сможет выполнить js и сделать скриншот сайта, или получить доступ к его dom дереву в любой момент после загрузки страницы.

Я бы назвал это тяжеловесным но абсолютно универсальным способом.