Laravel — почему queue не завершает работу после timeout?

Question

[sstars]

[program:s-worker]
process_name=%(program_name)s_%(process_num)02d
command=php /var/www/st/data/www/s/artisan queue:work --max-jobs=3 --sleep=3
autostart=true
autorestart=true
user=st
numprocs=1
redirect_stderr=true
stdout_logfile=/var/www/st/data/www/s/worker.log'
stopwaitsecs=1800

Job зависает при попытке заменить уже существующий файл командой Storage::put(). Почему это происходит и почему задание не выдает исключение по таумауту? Из за этого вся очередь встает и не двигается.

Тайм-аут установлен на 60 сек., и задание зависает надолго, мне помогают только команды "supervisor stop all" и "restart".

Comments

[Дмитрий]

а где вы таймаут установили?

[sstars]

Дмитрий, в самой задаче:
use Dispatchable, InteractsWithQueue, Queueable, SerializesModels;

public $timeout = 60;
public $task;

[Дмитрий]

ну IO blocking. Собственно в доке про ларку это написано. А понять почему он у вас так долго работает нельзя?

[sstars]

Дмитрий, А можно ссылку на доку про IO blocking. Как понять?

[Дмитрий]

sstars, https://laravel.com/docs/10.x/queues#timeout

Sometimes, IO blocking processes such as sockets or outgoing HTTP connections may not respect your specified timeout. Therefore, when using these features, you should always attempt to specify a timeout using their APIs as well. For example, when using Guzzle, you should always specify a connection and request timeout value.

[sstars]

Дмитрий, Любопытно, но почему Storage::put() вызывает IO blocking и как корректно ее отработать чтобы не было зависания.

[Дмитрий]

sstars, ну а куда вы сохраняете?

[sstars]

Дмитрий, если существует файл storage/app/data/filename.txt. и в job попытаться заменить его командой Storage::put('storage/app/data/filename.txt', $data), то процесс и вся очередь виснет.

[Дмитрий]

sstars, ну то есть локально сохраняете? А не какой нибудь S3?
а сколько демонов у вас могут начать пытаться переписать этот файл одновременно? и каковы размеры файлов?

[sstars]

да локально, 1 процесс только запускается, по настройкам supervisor это видно.

[Дмитрий]

sstars, ну если локально то там помоему - file_put_contents, а он I/O blocking насколько я помню. По настройкам видно - но может у вас в параллели еще чего вертится.

[sstars]

Дмитрий, спасибо.