Как победить ошибку has been attempted too many times в laravel?

Question

[Александр Панков]

Здравствуйте, у меня laravel 10 и php 8.2.7
Очередь на redis
Через супервизор поднят horizon

Вижу что не отрабатывают задания в очереди валятся с ошибкой has been attempted too many times почему-то.
В стектрейсе вообще не вижу чтобы были вызовы моих классов..

Задача сама по себе не долгая: маскимум 3сек: сходить в сторонний сервис по апи и сохранить результат себе в БД.
timeouut 60сек, retry_after 90сек

если запускать синхронно - никаких проблем.
на локалке, кстати тоже ни разу такой ошибки не встречал (локалка тоже с редисом в докере)

Куда копать, что делать, видимо какие-то блокировки, а какие.. проблема на тестовом сервер вылезла, там нагрузка никакая, еще от пары разрабов, которые фронт пилят?

вот пример, задачи абсолютно одинаковы и легковесные, когда-то выполняются, а когда-то нет


стектрейс

/vendor/laravel/framework/src/Illuminate/Queue/Worker.php:519
/vendor/laravel/framework/src/Illuminate/Queue/Worker.php:428
/vendor/laravel/framework/src/Illuminate/Queue/Worker.php:389
/vendor/laravel/framework/src/Illuminate/Queue/Worker.php:176
/vendor/laravel/framework/src/Illuminate/Queue/Console/WorkCommand.php:137
/vendor/laravel/framework/src/Illuminate/Queue/Console/WorkCommand.php:120
/vendor/laravel/horizon/src/Console/WorkCommand.php:51
/vendor/laravel/framework/src/Illuminate/Container/BoundMethod.php:36
/vendor/laravel/framework/src/Illuminate/Container/Util.php:41
/vendor/laravel/framework/src/Illuminate/Container/BoundMethod.php:93
/vendor/laravel/framework/src/Illuminate/Container/BoundMethod.php:35
/vendor/laravel/framework/src/Illuminate/Container/Container.php:662
/vendor/laravel/framework/src/Illuminate/Console/Command.php:208
/vendor/symfony/console/Command/Command.php:326
/vendor/laravel/framework/src/Illuminate/Console/Command.php:177
/vendor/symfony/console/Application.php:1081
/vendor/symfony/console/Application.php:320
/vendor/symfony/console/Application.php:174
/vendor/laravel/framework/src/Illuminate/Foundation/Console/Kernel.php:200
/artisan:35

Comments

[iljaGolubev]

сторонний сервис по апи

это он валится с has been attempted too many times?

[Александр Панков]

iljaGolubev, нет, это ошибка laravel

[Дмитрий]

я так понимаю ошибка job has been attempted too many? ну смотрите почему задача не выполняется.

[Александр Панков]

Дмитрий, да.
Ну вот все описал, привел стектрейс и я не вижу почему задача не выполняется, поэтому и пришел сюда

[Дмитрий]

Александр Панков, код Job покажите?

[Александр Панков]

Дмитрий,

class CampaignRenameListener implements ShouldQueue
{
    use HasAdsToken;
    use InteractsWithQueue;

    public function __construct(
        protected Client $client
    ) {
    }

    public function handle(CampaignRenameEvent $event): void
    {
        $token = $this->getTokenByCampaign($event->campaign);
        if (!$token) {
            throw new InvalidArgumentException(__('Token does not exist'));
        }
        $this->client->setToken($token);

        // вот тут стучусь в сторонние апи (у клиента таймаут 7секунд)
        $this->client->postRename()->request([
            'advertId' => (int)$event->campaign->wb_id,
            'name' => $event->newName
        ]);

    }

    public function failed(CampaignRenameEvent $event, Throwable $exception): void
    {
        $event->campaign->update(['name' => $event->oldName]);
    }
}

самое странное что валятся не все, а меньшая часть, как-будто апишка сервиса не отвечает, но при этом у меня должна быть ошибка выведена, а я ее не вижу, я вижу has been attempted too many times

[Александр Панков]

как я понял это ОШИБКА ВТОРОГО запуска (когда максимально возможно один трай), а первый запуск грохается в тишине. понатыкаю завтра логов, буду смотреть до куда код проходит..
но все равно странно должен жн экзепшен быть человекопанятный, а не тишина

[Дмитрий]

Александр Панков, ну дык вы куда нибудь из failed $exception то пробросьте.

[Александр Панков]

Дмитрий, а ннет, ошибка из редиса, которую пока не могу расшифровать


и вот после нее через 90сек уже ошибка джобы и так стабильно во всех случаях фейла

[Дмитрий]

Александр Панков, что я вам явно могу посоветовать отучаться общаться с программистами скриншотами. А уж на этом сайте это тупо запрещено правилами.

[JhaoDa]

Александр Панков, это не «ошибка из редиса», а ошибка подключения к редису.