@luaPower

Fork отказывается работать. Как исправить?

Здравствуйте.

Имеется приложение, которое активно форкается. Дочерние процессы большую часть времени простаивают, ожидая появления заданий. Не хотелось бы вдаваться в описание работы приложения. Будем считать, что это как раз тот случай, когда порождение большого количества потомков - приемлемое поведение программы.

Когда процессов в системе становится слишком много (в моем случае около 11 тыс), вызов fork начинает возвращать сообщение об ошибке "fork: retry: Resource temporarily unavailable". При чем это происходит не только в рамках основного приложения, но и при вызове большинства других штатных программ (например: ps, clear) из других терминальных сессий.

Снятие всевозможных ограничений с помощью ulimit не приносит желаемого эффекта. Проблема остается. Ниже вывод ulimit -a:

core file size          (blocks, -c) unlimited
data seg size           (kbytes, -d) unlimited
scheduling priority             (-e) unlimited
file size               (blocks, -f) unlimited
pending signals                 (-i) unlimited
max locked memory       (kbytes, -l) unlimited
max memory size         (kbytes, -m) unlimited
open files                      (-n) 1048576
pipe size            (512 bytes, -p) 8
POSIX message queues     (bytes, -q) unlimited
real-time priority              (-r) unlimited
stack size              (kbytes, -s) unlimited
cpu time               (seconds, -t) unlimited
max user processes              (-u) unlimited
virtual memory          (kbytes, -v) unlimited
file locks                      (-x) unlimited


Есть идеи, какие еще могли быть достигнуты ограничения, в результате чего стандартный механизм fork отказывается работать? В каких логах можно поискать ошибки, связанные с проблемой?
  • Вопрос задан
  • 755 просмотров
Решения вопроса 1
@zhum
программист, администртор
Если это всё в докере/lxc/итп или под systemd, то проверьте ограничение неймспейса, скорее всего именно там лимит на число fork-ов. Например, `/sys/fs/cgroup/pids/user.slice/user-1000.slice/pids.max`.
Ответ написан
Пригласить эксперта
Ответы на вопрос 1
@vitaly_il1
DevOps Consulting
Посмотрите, что происходит с памятью при этом - top или free.
Насчет логов - /var/log/syslog.
Ответ написан
Комментировать
Ваш ответ на вопрос

Войдите, чтобы написать ответ

Похожие вопросы