Как выполнять Ruby-метод проверки данных БД каждую секунду?

Question

[27182]

Пользователи сохраняют в базу данных информацию и выбирают срок её действия в секундах (может быть 10 секунд, а может и 1800). По прошествии этого времени с момента создания необходимо запускать определённый триггер. Cron-таски можно выполнять минимум раз в минуту.

Используемое решение

loop do
 Foo.check
 sleep 1
end

1. Какие есть способы сделать это правильнее?
2. Как оптимизировать подобный механизм, учитывая, что данных много, и проверка может выполняться дольше 1 секунды?

Answer 1

[Дима]

Можно использовать гем Sidekiq - аналог крона для Rails.
Когда пользователь добавляет запись - добавлять задание в Sidekiq, с задержкой, которую указал пользователь.
Подробнее здесь - Sidekiq

Comments

[27182]

Спасибо за вариант. Подумаю, попробую.

Answer 2

[Viktor Vsk]

Очередь задач (delayed job, sidekiq, resque) + планировщик (https://github.com/tomykaira/clockwork)

Comments

[27182]

Я так понимаю, что при использовании Sidekiq планировщик не нужен вовсе? Мы можем просто при добавлении задачи в очередь поставить срок её выполнения равный этим самым секундам? Единственное, какая точность и стабильность выполнения задач Sidekiq? Можно ли ожидать милисекундную точность?

[Viktor Vsk]

27182: задержка и планировщик - это разные задачи. Точность, думаю, везде стоит ожидать одинаковую

Answer 3

[maximw]

Запускать в кроне, в каждом запуске обрабатывать несколько записей. Главное не забывать про блокировки, чтоб хорошо работало, если вдруг сразу два процесса окажутся запущены - и в плане быстродействия и в плане целостности данных. Я обычно использую блокировки на уровне БД (MySQL GET_LOCK)

Comments

[Николай]

есть недостаток - крон будет поднимать рельсы каждую секунду

[maximw]

Евгений Николаев: Крон будет поднимать рельсы каждую минуту. Можно сделать более редкий запуск крона и увеличить кусок данных, которую обрабатывают в цилке. Ну хз, я в рельсах не очень силен. Возможно надо делать что-то типа демона, если это возможно и практикуют.

[Николай]

maximw: в случае минут оверхед небольшой, да, я прочитал как "раз в секунду"

[27182]

Спасибо за вариант, я о нём думал, но особо профита не увидел, по сравнению с вариантом в лоб.