Сервер работает ровно сутки и наглухо падает. С чем может быть связано?

Question

[mrantony]

Добрый день.
Сервер в OVH. Debian 10 + ISPmanager.
Работает ровно сутки и наглухо падает. Не пингуется даже.
Нагрузка не растёт, память не забивается.
Такое ощущение, что просто сетевой кабель выдернули.
После ребута из панели OVH всё восстанавливается и снова работает РОВНО сутки.
Куда копать, с чем может быть связано?

Comments

[АртемЪ]

Вам на картах погадать о причинах???? Или на кофейной гуще?

Логи смотрите.

[Sand]

for user in $(cut -f1 -d: /etc/passwd); do echo $user; crontab -u $user -l; done

[mrantony]

Sand,
root
## ISPsystem acme.sh certs update task
39 3 * * * /usr/local/mgr5/sbin/cron-core sbin/mgrctl -m core acmesh.certs.update >/dev/null 2>&1
## ISPsystem task which collect system statistics
*/5 * * * * /usr/local/mgr5/sbin/cron-core sbin/mgrctl -m core sysinfostat >/dev/null 2>&1
## ISPsystem delete expire logs task
0 3 * * * /usr/local/mgr5/sbin/cron-core sbin/mgrctl -m core deletearchivelogs >/dev/null 2>&1
## ISPsystem usagestat task
11 3 * * * /usr/local/mgr5/sbin/cron-core sbin/usagestat >/dev/null 2>&1
## ISPsystem problems autosolve task (/usr/local/mgr5)
*/5 * * * * /usr/local/mgr5/sbin/cron-core sbin/mgrctl -m core problems.autosolve >/dev/null 2>&1
## ISPsystem update package cache task
39 5 * * * /usr/local/mgr5/sbin/cron-ispmgr sbin/pkgupdate.sh >/dev/null 2>&1
## ISPmanager metric task
*/5 * * * * /usr/local/mgr5/sbin/cron-ispmgr sbin/metric >/dev/null 2>&1
## ISPmanager stat handler (ispmgr)
3 13 * * * /usr/local/mgr5/sbin/cron-ispmgr sbin/mgrctl -m ispmgr ispstat >/dev/null 2>&1
## ISPmanager periodic tasks handler (ispmgr)
* * * * * /usr/local/mgr5/sbin/cron-ispmgr sbin/mgrctl -m ispmgr periodic >/dev/null 2>&1
## ISPsystem problems autosolve task (/usr/local/mgr5)
*/5 * * * * /usr/local/mgr5/sbin/cron-ispmgr sbin/mgrctl -m ispmgr problems.autosolve >/dev/null 2>&1
## Check DS records from the domain registrar
17 4 * * 0 /usr/local/mgr5/sbin/cron-ispmgr sbin/mgrctl -m ispmgr checkdsrecords >/dev/null 2>&1
## ISPsystem upgrade task
12 9 * * * /usr/local/mgr5/sbin/cron-ispmgr sbin/pkgupgrade.sh coremanager >/dev/null 2>&1
## ISPmanager letsencrypt cert update check
49 3 * * * /usr/local/mgr5/sbin/cron-ispmgr sbin/mgrctl -m ispmgr letsencrypt.check.update >/dev/null 2>&1
## ISPsystem services monitoring task (srvmon)
*/15 * * * * /usr/local/mgr5/sbin/cron-ispmgr addon/srvmon >/dev/null 2>&1
daemon
no crontab for daemon
bin
no crontab for bin
sys
no crontab for sys
sync
no crontab for sync
games
no crontab for games
man
no crontab for man
lp
no crontab for lp
mail
no crontab for mail
news
no crontab for news
uucp
no crontab for uucp
proxy
no crontab for proxy
www-data
no crontab for www-data
backup
no crontab for backup
list
no crontab for list
irc
no crontab for irc
gnats
no crontab for gnats
nobody
no crontab for nobody
_apt
no crontab for _apt
systemd-timesync
no crontab for systemd-timesync
systemd-network
no crontab for systemd-network
systemd-resolve
no crontab for systemd-resolve
messagebus
no crontab for messagebus
unscd
no crontab for unscd
ntp
no crontab for ntp
sshd
no crontab for sshd
systemd-coredump
no crontab for systemd-coredump
debian
no crontab for debian
Debian-exim
no crontab for Debian-exim
mysql
no crontab for mysql
bind
no crontab for bind
shellinabox
no crontab for shellinabox
dovecot
no crontab for dovecot
dovenull
no crontab for dovenull
proftpd
no crontab for proftpd
ftp
no crontab for ftp

[Sand]

mrantony,

Работает ровно сутки и наглухо падает.

Точно ровно сутки? Не 23 часа 50мин, не 24 часа 38 минут? А ровно 24:00?

[Sand]

mrantony, как определили "ровно сутки"?

[mrantony]

Sand, 24:00:15
В момент пропадения связи uptime сервера 24:00:15

[Sand]

mrantony,
systemctl list-timers

[mrantony]

Sand,
root@crm:/home/debian# systemctl list-timers
NEXT LEFT LAST PASSED
Mon 2021-03-01 15:09:00 MSK 18min left Mon 2021-03-01 14:39:06 MSK 11min ago
Mon 2021-03-01 23:17:04 MSK 8h left Mon 2021-03-01 14:18:29 MSK 32min ago
Tue 2021-03-02 00:00:00 MSK 9h left Mon 2021-03-01 00:00:22 MSK 14h ago
Tue 2021-03-02 06:50:16 MSK 15h left Mon 2021-03-01 06:04:40 MSK 8h ago
Tue 2021-03-02 13:03:35 MSK 22h left Mon 2021-03-01 13:03:35 MSK 1h 47min ag

5 timers listed.
Pass --all to see loaded but inactive timers, too.
lines 1-9/9 (END)

[Sand]

mrantony, а какой uptime сейчас?

[mrantony]

Sand, 2:07:30

[Sand]

mrantony, в list-timers ещё должны быть "UNIT" и "ACTIVATES", они есть?

[mrantony]

Sand, видимо нет.
Я прислал весь вывод systemctl list-timers

[mrantony]

Sand, Напишите пожалуйста в телеграм mrantonyz

[Максим Гришин]

mrantony чтобы посмотреть unit и activates, при запуске systemctl list-timers надо нажать стрелку вправо. Они там есть, просто стандартного TTY 80x25 не хватает, чтобы их отобразить. (Дурная вообще система имхо, но имеем что имеем) Смотрите внимательнее, что делает тот таймер, который пытается стать expired через сутки.

[Александр Карабанов]

IP адрес сервер получает по DHCP?

[Кирилл Маслов]

/var/log/messages
dmesg
journalctl --boot=-1

Answer 1

[PleasantNews]

вообще-то советую бежать из OVH быстренько и шустренько: у них какая-то кул-хацкерская нечисть хостится, бомбили мои сервера брутами, инъекциями и прочей скрипт-киддиснёй. ТП вообще не чешется, пришлось взять и забанить все подсетки (AS) этого прова.
Почему убегает сервер ровно через сутки? Ну понятно же - запускается крон и убивает какую-то настройку. например привяpку IP к серверу. Ну а потом мальчик залезает в ssh и прописывает ручками ifconfig )
Ужасный пров, хуже Хостгаттора и всяких Блюхостов )