Как доработать парсер, чтобы он воспроизводился каждые 5 минут?

Question

[Максим]

У меня есть telegram бот который парсит новости с нескольких сайтов . Но проблема в том, что все парсеры работают не на постоянной основе. Мне нужно, чтобы они работали через определённое время. Например раз в 5 минут ещё раз парсили инфу с сайта и так на постоянной основе.

Вот сами парсеры:
Этот на RSS основе

import requests
from bs4 import BeautifulSoup

url = 'https://kod.ru/tag/news/rss/'
r = requests.get(url=url)
print(r.status_code)

xml = BeautifulSoup(r.text, 'xml')
items = xml.findAll('item')
print(len(items))

def dur():
    for item in items:
        print('------------------------------')
        print('Заголовок: ', item.find('title').text)
        print('URL: ', item.find('link').text)
        print('data: ', item.find('pubDate').text)
        return item.find('link').text

Этот на HTML основе

import requests
from bs4 import BeautifulSoup

url = 'https://ria.ru'
r = requests.get(url=url)
print(r.status_code)
html = BeautifulSoup(r.text, 'html.parser')

def hello ():
    for item in html.findAll('div', class_='cell-list__item m-no-image'):
        print('------------------------------')
        print('Заголовок: ', item.find('span', class_='cell-list__item-title').text)
        print('URL: ', item.find('a', class_='cell-list__item-link')['href'])
        return item.find('a', class_='cell-list__item-link')['href']

Answer 1

[Yupiter7575]

Поднимать сервер, и через модуль datetime отслеживать время. Можете попробовать heroku, они дружат с пайтоном

Comments

[Максим]

Ты имеешь в виду запустить всего бота на сервере heroku? Но как сделать постоянно работающими парсеры или они уже будут постоянно работать на сервере?

[Yupiter7575]

Максим, Запускаете на сервере, подключаете крон - и будет вам счастье

Answer 2

[Jordan_Belforts]

Можно использовать крон, если запускаете на Линукс.

Comments

[Максим]

Что такое крон? Да и я уже пробовал запустить бота на удалённом сервере ubuntu.

[Jordan_Belforts]

почитайте тут

[Jordan_Belforts]

Ну или можно демона создать. Для этого почитайте про systemd

Answer 3

[Alex F]

crontab -e
*/5 * * * * /you/command

Comments

[Максим]

Парсеры запускаются, но видимо нужно чтобы они запускались через бота. Ибо в самом телеграмме у меня скидывается одна и та же новость.

Answer 4

[MinTnt]

1) Использовать крон.
2) Обычное:

import time
while True:
    #код...
    time.sleep(300)