Какие инструменты использовать для написания парсера сайта с JS защитой?

Question

[Алексей]

Есть сайт. данные на нем отображаются в виде таблицы после простого GET или POST запроса.

Но если я запрашиваю этот сайт через curl, там вместо контента - что-то типа зашифрованной\обфусцированной функции на JS .
В браузере код естественно выполняется, перезагружает страницу, и сайт работает.

Какие инструменты лучше использовать для парсинга подобных сайтов?

Answer 1

[Evgen]

Ну посмотрите, куда отправляется запрос, и эмулируйте его.
хотите всё и сразу - используйте selenium c chrome headless или splash от scrapinghub