Бывало ли у вас, что скрипт на php подвисает на несколько минут просто так?

Question

[Константин]

Здравствуйте.
PHP 7.2.15 (cli)
Имеется php скрипт, который работает в бесконечном цикле. Выполняется ряд действий, которые логируются, пауза минута и опять по новой. И иногда между двумя записями в логах может пройти не положенные 1-2 секунды, а несколько минут, а то и 10 минут.
Скрипт запускается на купленном VPS.
Для исключения причин в самом впс, параллельно запущен скрипт, который пишет в лог каждую секунду запись, в нём таких пробелов нету.
Мониторил процессы/ресурсы через atop, ничего подозрительного не показало.
Подскажите, на что может быть похоже? Искать причину в самом коде не где, т.к. такие пробелы каждый раз появляются в новом месте.

Answer 1

[Константин]

Решение: переделал скрипт на крон вариант, бесконечный цикл убрал.
Добавил проверку через flock

$lock = fopen("/tmp/lock.txt", "a+");
if (!$lock || !flock($lock, LOCK_EX | LOCK_NB)) {
    exit("LOCK_DETECT. EXIT \n");
}

Answer 2

[Николай Конюхов]

Пока логов не будет - это все гадание на кофейной гуще. Обложите путь выполнения скрипта трэйсами, посмотрите в чем дело - быть может поймали лок в бд или внешний сервис долго отвечает на запрос. Плюс выглядит так, что while(true) можно поменять на запуск по крону - говорят php рожден, чтобы умирать

Comments

[Константин]

спасибо, попробую вынести цикл в bash обёртку и запускать php скрипт из него и паузу делать в нём. Через недельку отпишусь

[Константин]

и всё таки на кнон решил переделать

[Константин]

Передалал под cron, чтобы не было запуска следующего, пока не завершился предыдущий сделал проверку через flock

$lock = fopen("/tmp/lock.txt", "a+");
if (!$lock || !flock($lock, LOCK_EX | LOCK_NB)) {
    exit("LOCK_DETECT. EXIT \n");
}

Answer 3

[Максим Тимофеев]

Выполняется ряд действий

Ну так пока ряд действий не выполнится, не переходит к следующим. Видимо при определенных условиях (входных данных) ряд действий выполняется долго.

пауза минута

как она реализована? В скрипте? Тогда она срабатывает только когда выполнится скрипт (интеграция в Вашем цикле). Вы не параллельно логирование запускайте а внутри цикла, перед паузой. Логируйте ошибки и т.д.

Comments

[Константин]

Да, у меня очень много детализаций с логированием. Но несмотря на них, всё равно не пойми откуда пробелы между записями в логах.

while (1) {
            ....
            sleep(60);
        }

[hOtRush]

vebmaster, мда, крон походу реально для слабаков придумали, странно что еще не руками каждую минуту запускаешь)

[Максим Тимофеев]

vebmaster,

откуда пробелы между записями в логах.

а что скрипт обязан всегда выполняться одинаковое количество времени? Даже 1+2 будет с разной скоростью каждый раз выполняться, а у Вас там явно что-то сложнее. Засекайте время и пишите в логи входные данные, которые вызывают превышение Ваших ожиданий.
Если хотите запускать каждую минуту - надо как сказал hOtRush крон юзать.

[Константин]

Максим Тимофеев, убедили, переделаю на крон :)

[padlyuck]

hOtRush, Максим Тимофеев, крон конечно правильнее использовать, но как быть в ситуации если параллельное выполнение двух копий скрипта недопустимо и является критичным условием?

[Константин]

padlyuck, так у меня нету паралельного выполнения скрипта. Или вы просто уже сами интересуетесь?

[padlyuck]

vebmaster, ну так сейчас нету потому что у вас бесконечный цикл и один процесс, а на кроне вполне может появиться параллельное выполнение, если проблема не связана с циклами, а задержка действительно где-то внутри скрипта

[Константин]

padlyuck, надо подумать, можно LOCK файл создать.
Если он есть, значит сразу выходим из скрипта. Ждём следующего запуска по крону.

[padlyuck]

vebmaster, банальные методы не интересны)) вопрос был в том, можно ли средствами крона решить задачу

[Константин]

padlyuck, тогда через `ps uax` выяснить висит ли процесс и запускать команду на основе Да или Нет от предыдущей проверки

[Максим Тимофеев]

padlyuck,

как быть в ситуации если параллельное выполнение двух копий скрипта недопустимо и является критичным условием?

Запускать скрипт, а в нем делать проверку, хранить где-то флаг (boolean), который отменит запуск, если не закончился предыдущий.
ну или средствами самого крона: Как сделать условия для cron задачи?

[Stalker_RED]

vebmaster,

можно LOCK файл создать.
Если он есть, значит сразу выходим из скрипта. Ждём следующего запуска по крону.

И получаем еще большие задержки, т.к. если локфайл обнуляется через 1м 5 сек, то крон запустит следующую итерацию только на второй минуте.

Можно поискать что там так долго работает с отладчиком.

[Константин]

Stalker_RED, проблема возникает очень редко, например 1 раз в день, а то 1 раз в несколько дней. Причём в разных местах.
Например, между завершением работы метода и запуском следующего метода (примерно так). По сути сложных действий нету.

[Максим Тимофеев]

vebmaster, Допустим запустился backup в фоне и то что у Вас ранее занимало 1с стало занимать 100с. Или любая другая нагрузка пришла откуда не ждали. Если бы у Вас это был единственный скрипт - тогда странно. А так - надо искать. Вариантов миллион.

[peterpro]

padlyuck, supervisor. Или запуск через flock.

[Константин]

peterpro, да, сделал именно так, через flock

$lock = fopen("/tmp/lock.txt", "a+");
if (!$lock || !flock($lock, LOCK_EX | LOCK_NB)) {
    exit("LOCK_DETECT. EXIT \n");
}

[peterpro]

vebmaster, можно даже не на уровне кода это делать, а на уровне запуска, вот несколько примеров:
https://ma.ttias.be/prevent-cronjobs-from-overlapp...

[Константин]

peterpro, линуксовый flock пробовал, он создаёт очередь и как только освобождается ЛОК-файл, то тут же продолжает работу. Мне нужно было мгновенный выход из скрипта.