Какие технологии использовать для написания парсера?
Приветствую!
Пишу парсер. На данный момент данные подхватываются налету и сразу же обрабатываются. Обновление происходит через подгрузку php файла с помощью интервалов jQuery. Но данный подход плох тем, что данные дергаются и нет прошлых данных для сравнения. Хочу переписать скрипт, сделав его через базу, чтобы появилась возможность сравнивать и много других фишичек. И сразу же возникли вопросы:
- Как обновлять базу раз в 0.5 с? (Читал на тостере похожий вопрос, где предлагали snaked или бесконечный цикл в фоне, но что из этого лучше?)
- Какую базу использовать? (Данных мало, но запросов много.)
Уточню, что все это будет делать на выделенном сервере, а значит можете предлагать разные вариант. Заранее спасибо!
Микола Проблема в том, что так файл будет вызываться каждый 0.5 секунд для каждого пользователя. То есть будет переизбыток вызова файла. Также на данный момент уже хочется работу в фоне, чтобы отправлять уведомления.