Какие есть способы агрегации контента?

Question

[Cyber_bober]

Привет, какие есть способы агрегации контента? RSS/Парсинг? Что-нибудь еще? Какие библиотеки можете посоветовать или может ссылки на подобные кейсы?

Answer 1

[Юрий]

Scrapy ещё хороший фреймворк для сбора данных с сайтов.

Comments

[Cyber_bober]

спасибо за совет, почитаю про это)

Answer 2

[Алексей Черемисин]

elasticsearch? и что подразумевается под "агрегация"? Для меня это сбор и обработка, например сколько раз упоминалась новость..

Comments

[Cyber_bober]

вы все правильно говорите, но тут есть два этапа - первый это сам gathering и меня волнует в текущий момент именно он, а вот второй это уже ранжирование) спасибо за совет, почитаю