Как отправлять на почту сообщение об упавших службах?

Question

[DVoropaev]

Хочу, чтобы мне на почту приходило сообщение, если какая то служба упала. Есть готовые решения? Если писать скрипт, то какой модуль юзать?

Answer 1

[Денис Фомин]

Я бы для этого использовал связку python и cron.
Никогда такого не делал, но попробую представить. У службы systemd есть замечательная функция -- отображать все сервисы, что упали, выглядит она вот так:
systemctl list-units --state=failed
Далее, в Питоне у нас есть замечательный модуль для выполнения команд subprocess.
Ну так вот, с помощью него выполняем команду и парсим результат, если у нас есть упавшие службы, то отправляем письмо. Для отправки письма можно использовать встроенный smtplib.

Далее настраиваем крон, чтобы он выполнял этот скрипт, скажем, каждые 30 секунд. Вот и все, скрипт готов.

Comments

[CityCat4]

У крона гранулярность - минута. И это будет беспонтовка. Для такого опроса пишут демонов, которые висят в памяти постоянно, а не дергают крон каждую минуту. Наслушаются люди таких советов, нашарашат заданий, а потом "говно Ваш линух, он у меня тормозит, когда в кроне стопицот заданий".

[Денис Фомин]

CityCat4, А, ну да, так даже лучше. Почему-то я сразу об этом не подумал. Вот видите, какой вы хороший человек и объясняете почему такие советы лучше не слушать

[Sanes]

CityCat4, через sleep

[zersh]

вполне рабочий совет. вместо питона можно использовать perl, bash - что больше нравится автору.
гранулярность решается через sleep. или вообще сделать свой systemd unit который будет запускать нужный скрипт.
Да и вообще, кто сказал что минута это много? в большинстве случаев более чем достаточно.
А чтобы крон не плодил процессы - в скрипте нужно заложить проверку на запущенность другого процесса.

Ставить систему мониторига, как советуют ниже - это слишком, если нужно контролировать один два сервера

Answer 2

[ТыжСисАдмин]

Можете писать скрипт, можете использовать любую систему мониторинг и всёравно написать скрипт :)

Answer 3

[CityCat4]

nagios + nrpe (или nsclient++ для винды)

Answer 4

[Vladimir]

пользуюсь системой мониторинга monit
легко настраивается.
тут дока
https://mmonit.com/monit/documentation/monit.html

Answer 5

[maledog]

ROLF. Может для начала определиться, что за службы? Для того чтобы понять критерии по которым определять что служба упала? Службы бывают разные. Где-то достаточно искать процесс по имени, где-то проверять наличие открытого порта, где-то нужны более сложные правила. Нет одного волшебного решения, которое мониторит любые службы, либо это такая махина что ей нужен отдельный мониторинг.

Answer 6

[Руслан Федосеев]

zabbix и другие мониторинги. Тысячи их.

Answer 7

[Dmitry]

Monit - упавшую поднимет, зависшую перезапустит, алерты пришлет.
Помимо слежения за сервисами, может мониторить кучу других событий. Неплохо документирован.