PHP. Очередь задач. Выполнение по расписанию. На чем реализовать?

Question

[Ruslan72]

Будет примерно такое:
Пользователи сервиса будут настраивать параметры расписания публикации сообщений:
1. Публиковать одну запись в заданное время
2. Публиковать записи каждые хх минут

Далее выбирает дни недели, время и период публикации.
После этого система по расписанию публикует что то.

Вопрос в том, как это все организовать, с помощью чего(celery, mongoDB, RabbitMQ )?
С таким никогда не сталкивался, и хочется не ошибиться с выбором.

Предполагается, что пользователей будет много(1000+), каждый может настраивать десятки расписаний.
Возможно будет необходимость использовать несколько серверов для распределения нагрузки.

Серверная часть будет на php + mysql

Answer 1

[tmvrus]

Beanstalkd умеет отдавать отдавать задачи из очереди по расписанию, есть персистентность, очень простой интерфейс. А повторяющиеся задачи можно реализовать в клиентском коде.

Answer 2

[Сергей Протько]

ActiveMQ поддерживает отложенные задачи и задачи по расписанию. Для RabbitMQ тоже что-то подобное было, но...

Если нужно будет разбрасывать задачи по сервакам, пожалуй самые удобные варианты.

Comments

[Ruslan72]

Проблема в том что расписание будут редактировать часто.
А если делать так:
Вариант 1
Есть таблица с этим расписанием на MySQL
Cron каждую минуту или несколько секунд заглядывает в таблицу и создает задачи на ближайшее выполнение в очередь, у которых подошло время.
Вариант 2
Есть таблица с этим расписанием на MySQL
Cron каждую минуту или несколько секунд заглядывает в таблицу и создает и обновляет задачи на все активные расписания.

Или по нормальному как такое делается?

[Сергей Протько]

@Ruslan72 если вы прочитаете ответы еще раз - вам предлагают решения нормальные для этого всего. Не вижу проблемы.

[Ruslan72]

@Fesor И какой верный ответ?

[Сергей Протько]

@Ruslan72 верного нету. Есть три варианта, ActiveMQ, Gearman, Beanstalkd. Пробегитесь по документации, посмотрите есть ли под PHP библиотеки-фронтэнды...

[Ruslan72]

RabbitMQ - забыли? По документации я и до вопроса смотрел некоторые из них, после применения какой либо технологии отмечу верный ответ или напишу свой

[whats]

@Ruslan72 RabbitMq Это лишь брокер без всякой дополнительной функциональной ерунды. Он умеет принимать, распределять и отдавать сообщения. Там нет понятия времени. Как придет Консьюмер так и будет прочитано сообщение. А вот уже на чем строить систему слежения за очередью решать вам.

Answer 3

[Push Pull]

Gearman