Почему крашится SSH в Ubuntu?

Question

[Юрий]

Есть обычный VPS с обычным встроенным SSH, также там есть apache2 и PHP7.4.
Пользовался я им спокойно некоторое время и вот сегодня я столкнулся с тем что неважно после автозагрузки или после ручного запуска SSH стал тупо крашится, и в syslog я нашёл только это:

Oct 14 00:01:18 Ubuntu systemd[1]: Starting OpenBSD Secure Shell server...
Oct 14 00:01:18 Ubuntu systemd[1]: Started OpenBSD Secure Shell server.
<проходит некоторое время простоя>
Oct 14 00:06:02 Ubuntu systemd[1]: ssh.service: Main process exited, code=killed, status=9/KILL
Oct 14 00:06:02 Ubuntu systemd[1]: ssh.service: Failed with result 'signal'.
Oct 14 00:06:05 Ubuntu systemd[1]: ssh.service: Scheduled restart job, restart counter is at 1.
Oct 14 00:06:05 Ubuntu systemd[1]: Stopped OpenBSD Secure Shell server.
Oct 14 00:06:05 Ubuntu systemd[1]: Starting OpenBSD Secure Shell server...
Oct 14 00:06:05 Ubuntu systemd[1]: ssh.service: Control process exited, code=killed, status=15/TERM
Oct 14 00:06:05 Ubuntu systemd[1]: ssh.service: Failed with result 'signal'.
Oct 14 00:06:05 Ubuntu systemd[1]: Stopped OpenBSD Secure Shell server.

Гугление абсолютно не помогло
Подскажите пожалуйста, что это такое и какая причина и как лечится?

Comments

[Александр Карабанов]

cat /var/log/dmesg | grep -i oom выводит что нибудь?

[сергей кузьмин]

@urec-borec
Программист
почитайте еще лог в районе Oct 14 00:06:02 и чуть раньше там написано за что применили 9

[Ищю в поисковиках]

dmesg -T что показывает?

Есть предложение, что сработал ooomkiller, но это из логов должно стать понятно.

[Юрий]

Александр Карабанов, Нет

[Юрий]

Ищю в поисковиках, Так то много чего, но про ssh не строчки

[Юрий]

сергей кузьмин, Ничего особенного не нашёл

[Ищю в поисковиках]

Юрий, тогда вариант остался такой: запускаете sshd, подрубаетесь к нему strace (желательно в tmux) и смотрите системные вызовы с конца.

tmux
# ищите процесс и подрубаетесь к нему по pid
# sshd должен быть уже запущен
strace -s 9999 -o ~/strace.log -ttfp $(pgrep sshd)
# сам лог будет писаться в домашний каталог
# отключится от tmux - ctrl+b потом d

# вернуться в сессию tmux 
tmux a

Только при таком подходе нужно быть внимательным - т.к. очень легко диск засрать. Ну и если место в ноль уходит не удалять файл, а транкейтить
truncate -s 0 ~/strace.log
Удаление приведет к тому, что место не освободиться, пока процесс работу не завершит.

Ну а дальше обмазываешся выводом и дебажишь XD

Answer 1

[Юрий]

PS: Единственное что смог случайно отловить в systemctl status
ExecStartPre=/usr/sbin/sshd -t (code=exited, status=0/SUCCESS)
Process: 2711 ExecStart=/usr/sbin/sshd -D $SSHD_OPTS (code=killed, signal=KILL)
Main PID: 2711 (code=killed, signal=KILL)

Comments

[Юрий]

journalctl:
окт 14 16:55:52 Ubuntu systemd[1]: Starting OpenBSD Secure Shell server...
окт 14 16:55:52 Ubuntu sshd[3246]: debug3: already daemonized
окт 14 16:55:52 Ubuntu sshd[3246]: debug3: oom_adjust_setup
окт 14 16:55:52 Ubuntu sshd[3246]: debug1: Set /proc/self/oom_score_adj from 0 to -1000
окт 14 16:55:52 Ubuntu sshd[3246]: debug2: fd 3 setting O_NONBLOCK
окт 14 16:55:52 Ubuntu sshd[3246]: debug1: Bind to port 22 on 0.0.0.0.
окт 14 16:55:52 Ubuntu sshd[3246]: Server listening on 0.0.0.0 port 22.
окт 14 16:55:52 Ubuntu sshd[3246]: debug2: fd 4 setting O_NONBLOCK
окт 14 16:55:52 Ubuntu sshd[3246]: debug3: sock_set_v6only: set socket 4 IPV6_V6ONLY
окт 14 16:55:52 Ubuntu sshd[3246]: debug1: Bind to port 22 on ::.
окт 14 16:55:52 Ubuntu sshd[3246]: Server listening on :: port 22.
окт 14 16:55:52 Ubuntu systemd[1]: Started OpenBSD Secure Shell server.
окт 14 17:00:02 Ubuntu systemd[1]: ssh.service: Main process exited, code=killed, status=9/KILL
окт 14 17:00:02 Ubuntu systemd[1]: ssh.service: Failed with result 'signal'.
окт 14 17:00:05 Ubuntu systemd[1]: ssh.service: Scheduled restart job, restart counter is at 1.
окт 14 17:00:05 Ubuntu systemd[1]: Stopped OpenBSD Secure Shell server.
окт 14 17:00:05 Ubuntu systemd[1]: Starting OpenBSD Secure Shell server...
окт 14 17:00:05 Ubuntu systemd[1]: ssh.service: Control process exited, code=killed, status=15/TERM
окт 14 17:00:05 Ubuntu systemd[1]: ssh.service: Failed with result 'signal'.
окт 14 17:00:05 Ubuntu systemd[1]: Stopped OpenBSD Secure Shell server.

Answer 2

[galaxy]

Уж не вирусня ли какая его убивает?
Настройте auditd

Comments

[Юрий]

Ничего такого не нашёл, хотя может и не туда смотрел