Может ли отключиться скрипт, который должен работать целые сутки? И что с этим делать?

Question

[khodos_dmitry]

Если даже стоит это:
ini_set('max_execution_time', '100000');
set_time_limit(0);
ini_set('memory_limit', '2048M');
ignore_user_abort(true);

Answer 1

[Андрей Зубков]

Как запускаете скрипт?

Comments

[khodos_dmitry]

я

[Андрей Зубков]

Я имел ввиду запускаете с консоли командой php script.php или в браузере открываете его site.ru/script.php?

Answer 2

[4Utok]

Может
1) надо разбивать его на отрезки работы и запускать по крону
2) сделать второй скрипт на кроне который будет мониторить запущен ли первый

Comments

[khodos_dmitry]

а как сделать? Какая команда проверяет запущен ли скрипт?

[4Utok]

khodos_dmitry: через exec вызвать top но лучше при старте того задавать id процесса и мониторить процесс. Можно через метки в БД, логи монитрить. Как вы как человек понимаете что скрипт не работает например?

[khodos_dmitry]

при старте того задавать id процесса и мониторить процесс.
Как это сделать?
Я смотрю, если в БД изменений не происходит долгое время, значит не работает.

[Николай Конюхов]

khodos_dmitry: положите файл-метку рядом со скриптом, что-то вроде "UPDATE_IN_PROGRESS", создаваемый при старте и удаляемый по завершении

[khodos_dmitry]

если скрипт оборвется, то кто удалит этот файл?

[4Utok]

khodos_dmitry: надо в БД писать время последнего изменения, скрипт-контроллёр смотрит - запись старше чем 5 минут - скрипт не работает

[Evgeny Svirsky]

Для мониторинга есть такая штука как supervisor. Советую воспользоваться.

Answer 3

[Evgeny Svirsky]

supervisord

Answer 4

[4iloveg]

Может стоит логику парсера лучше проработать?
Многопоточный курл использовать а лучше Guzzle.
Что бы дублей не было собери сперва ссылки на страницы (в таблицу например) далее пусть скрипт проходит по этой таблице отмечая элемент как спаршенный. И при добавлении не добавлять страницы которые есть в таблице.

Comments

[khodos_dmitry]

можно и многопоточный курл, но скрипт же надо поднимать, когда он ляжет.

[4iloveg]

khodos_dmitry: Можно написать скрипт так что бы он работал 1 минуту сохраняя информацию, а на следующую минуту запускался по крону.