Очередь задач

Question

[facha]

Всем привет.

Возникла необходимость в софте для linux, реализующем очередь задач. Есть что-нибудь не слишком тяжеловесное?

Вот как я себе это представляю. Несколько процессов добавляют задачи в очередь. Эти задачи выполняются в порядке добавления. Пока предыдущее задание не выполнено, следующее не запускается.

Если вдруг окажется, что софта такого типа навалом, подскажите что-нибудь, что есть в пакетах CentOS.

Заранее спасибо.

Answer 1

[Ilya Evseev]

Поиск в Гугле «linux simple jobs queue» находит Task Spooler:
www.ubuntugeek.com/task-spooler-personal-job-scheduler.html

-S [num] set the number of max simultanious jobs of the server.

Answer 2

[script88]

habrahabr.ru/company/biggo/blog/102742/

Answer 3

[PaulOkopny]

www.celeryproject.org/
www.gearman.org/

Comments

[facha]

Я, похоже, неправильно сформулировал вопрос. Под задачами я понимаю консольные команды, программы, скрипты и т.п.

Answer 4

[Владимир Соколовский]

Есть очень простая очередь задач для python — python-rq.org/
А с помощью питона вы можете запускать консольные команды, программы, скрипты и т.п.

Если хотите еще проще — напишите свою на кроне, файлах и баше.

Answer 5

[joneleth]

Насколько не тяжеловесное? Jenkins?

Answer 6

[Ilya Evseev]

Велосипед:

Подготовка:

groupadd jobadd
mkdir -m770 /var/lib/jobqueue
chown root:jobadd /var/lib/jobqueue

/usr/local/bin/jobadd:

#!/bin/sh
f=`/var/lib/jobqueue/date +%Y.%m.%d-%H%M%S-$$`
echo "$@" > "$f"

/usr/local/sbin/jobexec:

#!/bin/sh
cd /var/lib/jobqueue
while : ; do
    for f in *-*-*; do
        test "$f" = "*-*-*" && break
        logger "jobexec: $f `cat $f`"
        sh "$f"
        rm "$f"
    done
    sleep 30
done