Как запустить процесс из Python-службы, который продолжит жить после смерти службы?

Question

[Дмитрий Логвиненко]

Я сделал на Python службу, которая может запускать и убивать сторонние процессы (с помощью Popen). Но есть одна маленькая проблема: при выходе из службы (systemctl stop или просто killпроцесса) она уносит с собой в могилу запущенные процессы.

Парочка примеров

• pyservice.service (Unit-file):
  

  [Service]
  ExecStart=/opt/pyservice/service.py

• service.py:
  

  ...
  subprocess.Popen('server.sh')
  ...

• server.sh:
  /usr/bin/java -server -jar ./Application.jar &
  
  

Что происходит в нашем царстве?
Я запускаю несколько экземпляров server.sh с помощью pyservice.
ps -aef --forest показывает ожидаемое дерево:

python3.6 /opt/pyservice/service.py
\_ [server.sh] <defunct>
/usr/bin/java -server -jar ./Application.jar 
/usr/bin/java -server -jar ./Application.jar

Если я уложу service.py, Application.jar тоже завершится.

Чего мы хотим?
Чтобы после kill service.py или перезапуска pyservice наши запущенные через него server.sh и его содержимое продолжили шуршать.

Что я уже пытался делать?
Разные комбинации os.system, subprocess.Popen, nohup, & и их аргументов.

Что я делаю не так?

Answer 1

[Александр]

проще всего использовать команду системы screen

os.system("screen /usr/bin/java -server -jar ./Application.jar")

когда сам скрин померает - запущенный процесс продолжает работать

Comments

[Дмитрий Логвиненко]

Жалуется на отсутствие TTY. Запускаю screen -d -m — почему-то не запускает сам server.sh

Answer 2

[Дмитрий Шицков]

Попробуйте двойной форк:

1. create a child via os.fork()
   
2. in this child call Popen() which launches the long running process
   
3. exit child: Popen process is inherited by init and runs in the background
   

https://stackoverflow.com/a/41433401

Пример. Пинг продолжит работать после завершения родителя:

import os, time, sys
import subprocess

time.sleep(1)

forked_pid = os.fork()

if forked_pid == 0:
  print("I am child!")
  subprocess.Popen(['ping','-c','10','localhost'])
  print("Child Quit")
else:
  print("I am parent!")
  time.sleep(2)
  print("Parent Quit")

sys.exit()

Comments

[Дмитрий Логвиненко]

Спасибо, я видел этот ответ.
Но, как я понял, двойной форк мне не подходит. В нем мы тушим основной процесс (который сервис), и мне не совсем понятно, как будет вести себя systemd (не начнет ли судорожно перезапускать).
К тому же, как писал, порождаемых процессов точно будет больше одного.

[Дмитрий Шицков]

Дмитрий Логвиненко, нет, вы тушите не основной процесс, а промежуточного потомка из п. 1. Основной процесс остается не при чем. Именно поэтому это двойной форк

[Дмитрий Логвиненко]

Дмитрий Шицков, оттуда же:

If you leave the parent running and the user stops the process e.g. via ctrl-C (SIGINT) or ctrl-\ (SIGQUIT) then it would kill both the parent process and the Popen process.

И у меня так и просиходит.

[Дмитрий Шицков]

Дмитрий Логвиненко, так. Вы снова не на то ссылаетесь! Я про двойной форк! Ну ладно, вот вам пример. Пинг продолжит работать даже после завершения прочих процессов:

import os, time
import subprocess

time.sleep(1)

forked_pid = os.fork()

if forked_pid == 0:
  print("I am child!")
  subprocess.Popen(['ping','-c','10','localhost'])
  print("Child Quit")
else:
  print("I am parent!")
  time.sleep(2)
  print("Parent Quit")