Node.js умеет рендерить страницы сайтов как браузер?

Question

[Xveeder]

Господа, слышал такую историю, что на ноде можно писать крутые парсеры. Т.к. она якобы может в ренденинг страниц посторонних сайтов.

Мечта заключается в том, чтобы написать такой скрипт, который будет парсить данные не на запросах, а при помощи полноценного рендеринга страницы и интерпретации js-скриптов. При этом, всё это делается headless и на сервере.

Оное возможно? Если да, укажите куда копать.
Спасибо.

Comments

[Lynn «Кофеман»]

Нет. Но хром умеет. И для него есть puppeteer которым можно управлять из ноды.

Answer 1

[Alex]

https://github.com/GoogleChrome/puppeteer
https://phantomjs.org/
zombie.js.org
etc

Comments

[Alex]

Александр Маргинал, ну работает на моих старых парсерах до сих пор.

[Alex]

Александр Маргинал, не вопрос. новые пилю на пупитере или jsDom в зависимости от того, надо или не надо рендерить страницу

[Xveeder]

Александр Маргинал, а можно у вас уточнить, какие проекты вы пилите на основе этих технологий?

Answer 2

[grinat]

https://apify.com/store?type=acts

Answer 3

[Андрей К]

Node.js не имеет встроенного Web API, поэтому не даёт никаких преимуществ перед любым другим языком.... К сожалению.

Проблема в том, что редкая библиотека на столько актуально и корректно работает с HTML, особенно с невалидным.