Как средствами php запустить выполнение linux-команды в фоновом режиме?

Question

[karpo518]

Для запуска скриптов на сервере в фоновом режиме я обычно использую команду nohup. Я попробовал вызвать её через exec и shell_exec без дополнительных параметров. При запуске команды скрипт зависает до того момента, пока команда не выполнится. Ниже код команды:

exec('nohup rsync -avz -e "ssh -p 22 -o UserKnownHostsFile=/dev/null -o StrictHostKeyChecking=no" user1@3.3.3.3:/original/ /destination/s_24/ && echo $? >> /destination/l_24.txt 2>&1 &');

Так как же мне запустить rsync в фоновом режиме средствами php так, чтобы скрипт не ждал пока выполнится команда?

Важные уточнения/наблюдения

1. PHP-скрипт запускается из браузера, а не из терминала
2. PHP работает через php-fpm, т.е. без Apache

Я заменил фоновую команду на упрощенную для анализа проблемы. Следующие варианты вешают скрипт:

sleep 15 &
nohup sleep 15 &
setsid sleep 15 &

Я предполагаю, это нормальное поведение для nohup. Команда, запущенная через nohup, теоретически может работать без терминала, если из него выйти. Но в вызове ведь нет команды выхода из терминала.

Тем не менее варианты:

nohup sleep 15 && exit &
nohup sleep 15 & exit

тоже не работают как надо.

Я также пробовал заменять exec на shell_exec, но это не дало никакого результата.

Comments

[FanatPHP]

nohup по сути не нужна здесь
А вот очему не срабатывает & я не очень понимаю

[Алексей Сундуков]

Если эту команду запустить прямо в терминале, то что получиться? Желательно привести листинг как есть.

[karpo518]

Алексей Сундуков,

user1@local:~$ nohup rsync -avz -e "ssh -p 22 -o UserKnownHostsFile=/dev/null -o StrictHostKeyChecking=no" user1@3.3.3.3:/original/ /destination/s_24/ && echo $? >> /destination/l_24.txt 2>&1 &
[1] 11191
user1@local:~$ nohup: ввод игнорируется, вывод добавляется в 'nohup.out'

Чего-то не хватает в этой команде. А если ещё exit в конце добавить, то вот так получается:

user1@local:~$ nohup rsync -avz -e "ssh -p 22 -o UserKnownHostsFile=/dev/null -o StrictHostKeyChecking=no" user1@3.3.3.3:/original/ /destination/s_24/ && echo $? >> /destination/l_24.txt 2>&1 & exit
[1] 11282
выход
nohup: ввод игнорируется, вывод добавляется в 'nohup.out'
Connection to x.x.x.x closed.

И всё равно висит

[Алексей Сундуков]

karpo518, А что

rsync -avz -e "ssh -p 22 -o UserKnownHostsFile=/dev/null -o StrictHostKeyChecking=no" user1@3.3.3.3:/original/ /destination/s_24/ &

дает?

[Алексей Сундуков]

karpo518, а так же что получается с

nohup rsync -avz -e "ssh -p 22 -o UserKnownHostsFile=/dev/null -o StrictHostKeyChecking=no" user1@3.3.3.3:/original/ /destination/s_24/ &

[karpo518]

Алексей Сундуков,

user1@local:~$ rsync -avz -e "ssh -p 22 -o UserKnownHostsFile=/dev/null -o StrictHostKeyChecking=no" user1@x.x.x.x:/original/ /destination/s_100/ &
[1] 28678
user1@local:~$ Warning: Permanently added 'x.x.x.x' (ECDSA) to the list of known hosts.
receiving incremental file list
./
.bowerrc
.gitignore
LICENSE.md
README.md
codeception.yml
...
sent 131,001 bytes  received 18,575,840 bytes  1,626,681.83 bytes/sec
total size is 75,344,565  speedup is 4.03

Я также добавил в вопрос дополнительную информацию по проблеме

[Алексей Сундуков]

FanatPHP, потому что в фон уходит echo, а не nohup.

Answer 1

[Алексей Сундуков]

Самое главное что нужно сделать это перенаправить stdout команды из nohup (через > к примеру). Упрощенный пример. Запускаем в фоне печать DA через 10 секунд после запуска без блокирования php процесса:

exec("nohup sh -c 'sleep 10 && echo \"DA\"' > nohup.php.out 2>&1 &");

Пример запуска:

$ date +%X
17:15:32
$ php -f test.php && date +%X && tail -F nohup.php.out
17:15:34
DA
^C
$ date +%X
17:15:45
$

Comments

[karpo518]

Алексей Сундуков Спасибо за подсказку. Как я понял "sh -c" равносилен запуску bash-скрипта, поэтому строка выполняется как единый скрипт. Но! У меня сработал ваш вариант без nohup, так что я удалил его.

exec("sh -c 'sleep 10 && echo \"DA\"' > nohup.php.out 2>&1 &");

[Алексей Сундуков]

Как я понял "sh -c" равносилен запуску bash-скрипта

Не совсем. Это не интерактивная командная оболочка. В ней части команд к которым мы привыкли в bash просто нет (потому что они встроенные в bash, а не вызываемые из $PATH).

Answer 2

[Иван Корюков]

nohup - это команда bash, которая просто указывает самому bash'у что фоновому процессу не надо отправлять сигнал HUP при завершении работы.
& это тоже фишка bash, позволяющая перевести процесс в фон

Проблема в том что php это вам не bash и он наверное сам отслеживает состояние запущенного им процесса.

Попробуйте использовать setsid.
В отличие от nohup это полноценная программа, которая запускает указанную в качестве аргумента программу в отдельной сессии. Как только целевая программа запущена setsid завершает работу. Это должно "отпустить" php почти моментально.

Comments

[karpo518]

Заменил nohup на setsid и удалил & в конце. Результат тот же. Программа висит, пока не выполнится

Answer 3

[karpo518]

Ещё раз всё проверил и написал костыль... Считаю проблему нерешенной =(

Подробности

Итоговые выводы:

Чтобы запустить команду асинхронно, нужно:

1. Перенаправить основной поток вывода из консоли (в /dev/null или файл)
2. Использовать после команды символ &

nohup и другие дополнительные команды не нужны

В моем случае это всё не сработало. Мне требуется получить код выхода rsync. По какой-то причине этот код не попадает ни stdout, ни в stderr. В итоге мне пришлось использовать конструкцию:

rsync params && echo $? >> /log.txt 2>&1 &

Именно эта конструкция по какой-то причине не работает асинхронно.

Чтобы код заработал асинхронно, потребовалось создать прослойку в виде bash-скрипта:

#!/bin/bash

rsync -avz -e "ssh -p $2 -o UserKnownHostsFile=/dev/null -o StrictHostKeyChecking=no" $3@$1:$4 $5 >> $6 2>&1

echo $? >> $6

# rsync_download.sh sshHost sshPort sshLogin target destinity logPath

И запускать её асинхронно:

$command = $shDir . "rsync_download.sh $sshHost $sshPort $sshLogin $directory $snapshotPath $logPath > /dev/null 2>&1 &";

exec($command);

Это ужасное и громоздкое решение. Если кто-то сможет объяснить причину проблемы и подсказать аккуратное решение без bash-скрипта, буду очень благодарен.

Тестовый пример, который подтверждает проблему с echo:

exec('grep -r "user" /folder/ && echo $? >> /home/user1/web/backuper.ru/web/log.txt 2>&1 &');

Comments

[Алексей Сундуков]

Тут в фон отправляется echo, а не grep. Ниже я уже писал, что можно за паковать цепочку через sh -e.

Answer 4

[Tibor128]

попробуйте daemon