@mercmarcus

Как лучше реализовать проверку на новых новостей?

Есть новостной сайт. Надо сделать парсер, который будет проверять каждые например 2 часа на новые новости и добавлять если такие имеются. Новости выводятся с разной периодичностью. Как правильно реализовать проверку на новые?
  • Вопрос задан
  • 51 просмотр
Решения вопроса 1
hottabxp
@hottabxp Куратор тега Python
Сначала мы жили бедно, а потом нас обокрали..
Я делал подобное так: загружал главную страницу сайта(например, на главной есть 20 последних новостей). Сохранял ссылки на страницы новостей в файл. Далее каждые пол часа загружал из файла в список старые ссылки. Потом загружал и парсил опять главную страницу сайта и проверял, есть ли ссылки с загруженной страницы в списке. Если есть, значит новость старая, если нет - тогда новость новая, и ссылку на нее добавлял в файл. И так по кругу.

PS: Скриншот, который вы предоставили - не несет никакой смысловой нагрузки.
Ответ написан
Пригласить эксперта
Ваш ответ на вопрос

Войдите, чтобы написать ответ

Похожие вопросы