Как запустить Python скрипт на сервере Linux Ubuntu?

Question

[RaFox]

Никак не могу справится с вопросом, "уничтожил" уже гугл вопросами, ничего не выходит. :(
Дано:
- Виртуальная машина в Yandex Cloud с Ubuntu (подключение по ssh)
- Скрипт Python (запрашивает данные по API с источника, собирает и загружает в локальную БД SQLite, расположенную рядом)
- Нужно реализовать запуск скрипта вместе с сервером и его постоянную работу в фоне
Расписания запуска методов работающих по API реализованы через библиотеку schedule в самом python.
Работа с БД через ORM Peewee.
Файлы скрипта расположены в отдельной директории: /home/wb_api/WB_API_D01
Пробовал через cron, скрипт не стартовал вообще.
Попробовал через системный файл как указывали тут, не вышло снова.
Возможно конечно "натупил" с описанием файла, но не уверен.

[Unit]
Description=WB_API
After=network-online.target

[Service]
User=rafox
WorkingDirectory=/home/wb_api/WB_API_D01
ExecStart=/usr/bin/python3 /home/wb_api/WB_API_D01/main.py
Restart=always

[Install]
WantedBy=multi-user.target

Самоучка, пытаюсь понять и разобраться, но идет туго...
При вызове sudo systemctl status system_wb.service
получаю ответ:

× system_wb.service - WB_API
     Loaded: loaded (/etc/systemd/system/system_wb.service; enabled; vendor preset: enabled)
     Active: failed (Result: exit-code) since Sat 2024-07-13 14:26:40 UTC; 37s ago
    Process: 1292 ExecStart=/usr/bin/python3 /home/wb_api/WB_API_D01/main.py (code=exited, status=1/FAILURE)
   Main PID: 1292 (code=exited, status=1/FAILURE)
        CPU: 235ms

Jul 13 14:26:40 wb-test-python systemd[1]: system_wb.service: Scheduled restart job, restart counter is at 5.
Jul 13 14:26:40 wb-test-python systemd[1]: Stopped WB_API.
Jul 13 14:26:40 wb-test-python systemd[1]: system_wb.service: Start request repeated too quickly.
Jul 13 14:26:40 wb-test-python systemd[1]: system_wb.service: Failed with result 'exit-code'.
Jul 13 14:26:40 wb-test-python systemd[1]: Failed to start WB_API.

Comments

[Vindicar]

Если запустить команду самому, что пишет?

sudo --user=rafox --chdir=/home/wb_api/WB_API_D01 /usr/bin/python3 /home/wb_api/WB_API_D01/main.py

А вообще, при проблемах с systemd первым делом смотри в журнал:
sudo journalctl -xe -u имя_сервиса
или просто
sudo journalctl -xe

[RaFox]

Vindicar, добрый день!

Я кажется все же нашел статью которая смогла мне объяснить как это должно работать.

rafox@wb-test-python:/home/wb_api/WB_API_D01$ systemctl status system_wb.service
● system_wb.service - WB_API
     Loaded: loaded (/etc/systemd/system/system_wb.service; enabled; vendor preset: enabled)
     Active: active (running) since Sat 2024-07-13 14:47:03 UTC; 22min ago
   Main PID: 1519 (python3)
      Tasks: 1 (limit: 1010)
     Memory: 20.8M
        CPU: 317ms
     CGroup: /system.slice/system_wb.service
             └─1519 /usr/bin/python3 /home/wb_api/WB_API_D01/main.py

Однако рано я обрадовался(

Судя по журналу sudo journalctl -xe -u

Jul 13 14:26:40 wb-test-python systemd[1]: Stopped WB_API.
░░ Subject: A stop job for unit system_wb.service has finished
░░ Defined-By: systemd
░░ Support: http://www.ubuntu.com/support
░░
░░ A stop job for unit system_wb.service has finished.
░░
░░ The job identifier is 2526 and the job result is done.
Jul 13 14:26:40 wb-test-python systemd[1]: system_wb.service: Start request repeated too quickly.
Jul 13 14:26:40 wb-test-python systemd[1]: system_wb.service: Failed with result 'exit-code'.
░░ Subject: Unit failed
░░ Defined-By: systemd
░░ Support: http://www.ubuntu.com/support
░░
░░ The unit system_wb.service has entered the 'failed' state with result 'exit-code'.
Jul 13 14:26:40 wb-test-python systemd[1]: Failed to start WB_API.
░░ Subject: A start job for unit system_wb.service has failed
░░ Defined-By: systemd
░░ Support: http://www.ubuntu.com/support
░░
░░ A start job for unit system_wb.service has finished with a failure.
░░
░░ The job identifier is 2526 and the job result is failed.
Jul 13 14:47:03 wb-test-python systemd[1]: Started WB_API.
░░ Subject: A start job for unit system_wb.service has finished successfully
░░ Defined-By: systemd
░░ Support: http://www.ubuntu.com/support
░░
░░ A start job for unit system_wb.service has finished successfully.
░░
░░ The job identifier is 2758.
Jul 13 15:10:51 wb-test-python systemd[1]: Stopping WB_API...
░░ Subject: A stop job for unit system_wb.service has begun execution
░░ Defined-By: systemd
░░ Support: http://www.ubuntu.com/support
░░
░░ A stop job for unit system_wb.service has begun execution.
░░
░░ The job identifier is 3439.
Jul 13 15:10:51 wb-test-python systemd[1]: system_wb.service: Deactivated successfully.
░░ Subject: Unit succeeded
░░ Defined-By: systemd
░░ Support: http://www.ubuntu.com/support
░░
░░ The unit system_wb.service has successfully entered the 'dead' state.
Jul 13 15:10:51 wb-test-python systemd[1]: Stopped WB_API.
░░ Subject: A stop job for unit system_wb.service has finished
░░ Defined-By: systemd
░░ Support: http://www.ubuntu.com/support
░░
░░ A stop job for unit system_wb.service has finished.
░░
░░ The job identifier is 3439 and the job result is done.
-- Boot 4e3c7ccde73440cd8244179bfcd4df4e --
Jul 13 15:11:51 wb-test-python systemd[1]: Started WB_API.
░░ Subject: A start job for unit system_wb.service has finished successfully
░░ Defined-By: systemd
░░ Support: http://www.ubuntu.com/support
░░
░░ A start job for unit system_wb.service has finished successfully.
░░
░░ The job identifier is 171.

[Vindicar]

Погоди, ну у тебя в логе последний запуск успешный, и status показывает работает. В ps -AF твой сервис виден? Посмотри PID, который статус сообщает.

[RaFox]

Vindicar, нет, сейчас он упал и не встает снова :(
В ps -AF сервиса нет

При этом если просто запустить скрипт через терминал, то он успешное выполняется, в бд данные грузятся и даже лог файл пишется.

Но вот поднять через systemd файл снова не удается.

Статус дает ошибку.

× system_wb.service - WB_API
     Loaded: loaded (/etc/systemd/system/system_wb.service; enabled; vendor preset: enabled)
     Active: failed (Result: exit-code) since Sat 2024-07-13 17:06:05 UTC; 7min ago
    Process: 1062 ExecStart=/usr/bin/python3 /home/wb_api/WB_API_D01/main.py (code=exited, status=1/FAILURE)
   Main PID: 1062 (code=exited, status=1/FAILURE)
        CPU: 241ms

Jul 13 17:06:05 wb-test-python systemd[1]: system_wb.service: Scheduled restart job, restart counter is at 5.
Jul 13 17:06:05 wb-test-python systemd[1]: Stopped WB_API.
Jul 13 17:06:05 wb-test-python systemd[1]: system_wb.service: Start request repeated too quickly.
Jul 13 17:06:05 wb-test-python systemd[1]: system_wb.service: Failed with result 'exit-code'.
Jul 13 17:06:05 wb-test-python systemd[1]: Failed to start WB_API.
Jul 13 17:06:05 wb-test-python systemd[1]: system_wb.service: Start request repeated too quickly.
Jul 13 17:06:05 wb-test-python systemd[1]: system_wb.service: Failed with result 'exit-code'.
Jul 13 17:06:05 wb-test-python systemd[1]: Failed to start WB_API.

UPD:

Удалось таки запустить все, но теперь я столкнулся с новой проблемой.
Спасибо логам из sudo journalctl -xe -u, хотя бы ошибки видно.

Судя по ошибке, проблема с чтением из файла .env.
Т.к. в requests из двух параметров я отдаю endpoint - объявлен в самой функции выше в виде строки,
и api_wb - а вот эту переменную я получаю как раз из файла .env.

И кажется какая то проблема с библиотекой dotenv при таком запуске скрипта, ибо если его запустить с терминала, то все прекрасно работает. :(

config = dotenv_values(".env")  # config = {}
api_wb = config.get("URL_Method_Statistic")

Jul 13 18:11:09 wb-test-api python3[3511]:   File "/home/WB_API_D01/main.py", line 64, in update_sales_schedule
Jul 13 18:11:09 wb-test-api python3[3511]:     update_sales_orders(url=url_stat,
Jul 13 18:11:09 wb-test-api python3[3511]:   File "/home/WB_API_D01/update_order_sales_wb_dg_gs.py", line 69, in update_sales_orders
Jul 13 18:11:09 wb-test-api python3[3511]:     response = orders_sales_get_wb(url=url, token=api_key_1, endpoint=endpoint, date_from=date_download_data_wb.date())
Jul 13 18:11:09 wb-test-api python3[3511]:   File "/home/WB_API_D01/script_wb.py", line 19, in orders_sales_get_wb
Jul 13 18:11:09 wb-test-api python3[3511]:     response = wildberries_api_get(key=token, api_wb=url, endpoint=endpoint, params=params)
Jul 13 18:11:09 wb-test-api python3[3511]:   File "/home/WB_API_D01/api_wb.py", line 21, in wildberries_api_get
Jul 13 18:11:09 wb-test-api python3[3511]:     response = requests.get(api_wb + endpoint, headers=headers, params=params)
Jul 13 18:11:09 wb-test-api python3[3511]: TypeError: unsupported operand type(s) for +: 'NoneType' and 'str'

UPD2:

Ура! Я понял в каком месте я дурак.
Я из файла .service, исключил параметр WorkingDirectory, скорее всего из-за этого скрипт перестал видеть файлы, в т.ч. и .env.

Спасибо за sudo journalctl -xe -u, не знал про эту команду, спасла неимоверно за счет наличия информации об ошибке)

Answer 1

[Zerg89]

Проблема здесь
Active: failed
Или здесь Start request repeated too quickly.