Как начать парсить сайты с авторизацией на nodejs?

Question

[kyzinatra]

Недавно появилась задача парсить сайт с авторизацией. Подскажите пакеты или гайды под это дело. Знаю что люди как-то через request делают, но как именно и подходит ли это для всех сайтов не очень понятно.
До этого писал парсеры только на cherryio и без авторизации. Хотелось бы парсить именно на nodejs\ts-node

Answer 1

[Vladislav]

Эта либа поддерживает такие браузеры как: Chrome, Firefox, IE, Edge, Opera, Safari
https://www.npmjs.com/package/selenium-webdriver

Создатели facebook. У меня на селениуме куча парсеров

Answer 2

[Daniil Vasilyev]

Как вариант через бразуер парсить:
https://github.com/puppeteer/puppeteer
Там можете кликать на кнопки, сохранять куки, залезать в DOM и тд..