Почему ложится Gearman?

Question

[Андрей Раковский]

Примерно при выполнении 1000 задач скрипт виснет, в top показывает, что Gearman загрузил проц на 100%.

Нагуглил https://github.com/brianlmoon/GearmanManager/issues/13 где нужно изменить значение dedicated_only, но не найду где находится этот конфиг?

Кто нибудь сталкивался с этой проблемой? Как её решать?

Answer 1

[Boris Köln]

Если нагрузить на ослика поклажу примерно 1000 килограммов, то он падает на землю и не может подняться.
Нагуглил, что ослика надо прокачать, но не найду как именно это сделать.
Кто нибудь сталкивался с этой проблемой? Как её решать?

Comments

[Андрей Раковский]

И? Герман не тянет 1к задач?

[Boris Köln]

Одновременно столько мало кто потянет.

[Андрей Раковский]

Boris Korobkov, ну причина же должна в чём-то быть? Скачок вроде резкий, т.е. к примеру 900 задач работает с нулевой нагрузкой, а 1000 с 100%

[Андрей Раковский]

Boris Korobkov, ну по факту каждая задача это отдельный процесс.

Answer 2

[Андрей Раковский]

Народ помогите! Заплачу деньги)

Герман виснет на 1027 задаче, при том, что на 1026 CPU не жрёт вообще. А на 1027 сначала подскакивает за 100, а потом скачет от 70 до 100.
И он умер, больше не отвечает.

Может быть ОС или PHP ограничивает кол-во процессов? 1 задача = 1 процессу.

Comments

[Андрей Раковский]

Убил процесс gearman. Скрипты в фоне также и работают, но в германе их уже нет. Явно стоит какое-то ограничение на выполнение тасков...

[Андрей Раковский]

Проблему решил. В логах было германа написано, что не хватает каких-то файлов.
Погуглив, нашел статью https://statusengine.org/tutorials/gearman-to-many...

P.s. Достаточно выполнить первый пункт и перезагрузить сервер.

[synapse_people]

Андрей Раковский, испытываю ту же самую проблему сейчас - open files не помогло решение
после начала работы тупо отваливаются все коннекты к нему и перестает отвечать