Как спарсить новости с любого новостного сайта?

Question

[Maxwi]

Некоторые сайты предоставляют api(RSS) типа https://lenta.ru/info/posts/export/ для доступа к их новостям, но что, если RSS не указан на сайте, а любая попытка парсинга приводит к ошибкам?

Comments

[Иван Шумов]

Страдать

Answer 1

[profesor08]

Ручками парсишь хтмл любым удобным способом. Либо платишь тому, кто это сделает за тебя.

Answer 2

[Ihor Bratukh]

Например, nodejs -> puppeteer -> mongodb