Почему сервер обрывает соединения?

Question

[Сергей Булатов]

Столкнулся с двумя, на первый взгляд не связанными явлениями.

Есть сервер на Debian 10, на котором развернут Minecraft сервер. Данный сервер запускается мной по SSH командой с использованием screen. Сегодня начались странности, сервер Minecraft'a стал обрывать все соединения и падать. Одновременно обрывает мое ssh подключение. Куда смотреть и в чем причина?

За день до этого настроил авторизацию по публичному ключу. Кажется проблема здесь, но я не уверен какую директиву в sshd_config нужно смотреть

Comments

[vreitech]

в первую очередь логи смотреть нужно в /var/log/messages.
во вторую - dmesg.
в третью - journalctl -xe.
в четвёртую - логи самого ПО (сервера майнкрафта).
где-то там и будет сказано, почему падает.
как вариант - срабатывает OOM.

[Сергей Булатов]

vreitech, что есть ООМ?

[Dmitry]

Out of memory killer
Если кто-то жрет память то система его пробьёт..

[Сергей Булатов]

Дмитрий, не думаю. Из 4 гигабайт максимально исаользуется 768 мегабайт, из них 300 это сервер.
Сервер написан на C++, если это имеет значение

[Dmitry]

Не, я просто ответил что такое ООМ
По вашему вопросу надо просто все доступные логи смотреть

[Сергей Булатов]

Дмитрий, vreitech,
Особо читать логи не научился

/var/log/messages

Mar  7 19:54:49 cringe-srv kernel: [ 7295.598926] Cuberite[1858]: segfault at 1500000053 ip 00000000006bde56 sp 00007f405bc68630 error 4 in Cuberite[409000+558000]
Mar  7 19:54:49 cringe-srv kernel: [ 7295.598939] Code: c1 e1 08 48 31 c1 48 8b 7f 20 4d 8b 5f 28 31 d2 48 89 c8 49 f7 f3 48 8b 04 d7 48 85 c0 74 78 48 8b 18 48 85 db 74 70 48 89 d6 <48> 8b 7b 48 45 31 $
Mar  7 20:00:01 cringe-srv kernel: [ 7607.207638] sh (2078): drop_caches: 3
Mar  7 20:48:04 cringe-srv kernel: [10490.386502] Cuberite[2306]: segfault at 48 ip 00000000006bf54b sp 00007fafebe82600 error 4 in Cuberite[409000+558000]
Mar  7 20:48:04 cringe-srv kernel: [10490.386515] Code: 46 08 4c 89 c3 48 c1 e3 08 48 31 c3 48 8b 0f 4c 8b 5f 08 31 d2 48 89 d8 49 f7 f3 49 89 d4 48 8b 04 d1 48 85 c0 74 47 48 8b 30 <48> 8b 4e 48 90 48 $
Mar  7 21:00:01 cringe-srv kernel: [11207.149891] sh (2518): drop_caches: 3
Mar  7 21:26:23 cringe-srv kernel: [12788.894679] Cuberite[2460]: segfault at 8 ip 0000000000423b3c sp 00007f09be7faa40 error 4 in Cuberite[409000+558000]
Mar  7 21:26:23 cringe-srv kernel: [12788.894688] Code: db 7e 44 48 c1 eb 03 48 83 c3 01 0f 1f 00 48 8b 7d f8 48 8b 45 00 48 c7 45 00 00 00 00 00 48 89 45 f8 48 85 ff 74 06 48 8b 07 <ff> 50 08 48 83 c5 $Mar  7 21:29:44 cringe-srv kernel: [12990.324203] Cuberite[3869]: segfault at 13965e ip 00000000004bdf20 sp 00007f9c2f94a7e0 error 4 in Cuberite[409000+558000]
Mar  7 21:29:44 cringe-srv kernel: [12990.324242] Code: f4 ff 4c 89 fb 4d 85 ff 75 e0 5b 41 5e 41 5f c3 66 2e 0f 1f 84 00 00 00 00 00 41 57 41 56 53 48 85 f6 74 26 48 89 f3 49 89 fe <48> 8b 73 18 4c 89 $
Mar  7 22:00:01 cringe-srv kernel: [14807.020365] sh (4440): drop_caches: 3
Mar  7 23:00:02 cringe-srv kernel: [18407.813586] sh (4851): drop_caches: 3

dmesg

[ 7295.598926] Cuberite[1858]: segfault at 1500000053 ip 00000000006bde56 sp 00007f405bc68630 error 4 in Cuberite[409000+558000]
[ 7295.598939] Code: c1 e1 08 48 31 c1 48 8b 7f 20 4d 8b 5f 28 31 d2 48 89 c8 49 f7 f3 48 8b 04 d7 48 85 c0 74 78 48 8b 18 48 85 db 74 70 48 89 d6 <48> 8b 7b 48 45 31 ed 0f 1f 00 48 39 cf 75 2b 44 3b 4b 08 75 25 44
[ 7607.207638] sh (2078): drop_caches: 3
[10490.386502] Cuberite[2306]: segfault at 48 ip 00000000006bf54b sp 00007fafebe82600 error 4 in Cuberite[409000+558000]
[10490.386515] Code: 46 08 4c 89 c3 48 c1 e3 08 48 31 c3 48 8b 0f 4c 8b 5f 08 31 d2 48 89 d8 49 f7 f3 49 89 d4 48 8b 04 d1 48 85 c0 74 47 48 8b 30 <48> 8b 4e 48 90 48 39 d9 75 1b 44 3b 56 08 75 15 44 3b 4e 0c 75 0f
[11207.149891] sh (2518): drop_caches: 3
[12788.894679] Cuberite[2460]: segfault at 8 ip 0000000000423b3c sp 00007f09be7faa40 error 4 in Cuberite[409000+558000]
[12788.894688] Code: db 7e 44 48 c1 eb 03 48 83 c3 01 0f 1f 00 48 8b 7d f8 48 8b 45 00 48 c7 45 00 00 00 00 00 48 89 45 f8 48 85 ff 74 06 48 8b 07 <ff> 50 08 48 83 c5 08 48 83 c3 ff 48 83 fb 01 7f d3 49 8b 86 90 00
[12990.324203] Cuberite[3869]: segfault at 13965e ip 00000000004bdf20 sp 00007f9c2f94a7e0 error 4 in Cuberite[409000+558000]
[12990.324242] Code: f4 ff 4c 89 fb 4d 85 ff 75 e0 5b 41 5e 41 5f c3 66 2e 0f 1f 84 00 00 00 00 00 41 57 41 56 53 48 85 f6 74 26 48 89 f3 49 89 fe <48> 8b 73 18 4c 89 f7 e8 e4 ff ff ff 4c 8b 7b 10 48 89 df e8 28 bc

journalctl -xe

-- Главный процесс нового сеанса имеет индентификатор 5536.
мар 07 23:28:48 cringe-srv systemd[1]: Started Session 37 of user renny.
-- Subject: Запуск юнита session-37.scope завершен
-- Defined-By: systemd
-- Support: https://www.debian.org/support
-- 
-- Процесс запуска юнита session-37.scope был завершен.
-- 
-- Результат: done.

Лог ПО

Err  [21:29:44] Failure report:

  :(   | Cuberite has encountered an error and needs to close
       | SIGSEGV: Segmentation fault
       |
       | Cuberite Jenkins x86_64-linux-gnu -DCMAKE_BUILD_TYPE=Release (master) (id: #176)
       | from commit 4d6235c807e8142a41bab86a4dc1a49fb1a078ca

Кроме непонятного события падения сервера не вижу ничего приводящего к обрыву ssh-сеанса
Я в замешательстве

[Ромзес Панагиотис]

Сергей Булатов, какие-либо средства мониторинга установлены?
Хотя бы munin или atop.
Может, ресурсов просто не хватает и все убивается механизмом OOM.

[Сергей Булатов]

Ромзес Панагиотис, я наблюдаю за системными ресурсами в процессе игры. Памяти используется 300 мб, процессора не больше 50%. В сеть упора точно не может быть.

Answer 1

[ge]

По умолчанию SSH рвёт соединение через 3 минуты бездействия (линк). Пропишите у себя на компьютере в ~/.ssh/config:

ServerAliveInterval 60  # период отправки сигнала keepalive в секундах
ServerAliveCountMax 120  # количество отправок сигнала

Таким образом соединение продержится два часа при бездействии. Если ваша проблема действительно в этом, то должно помочь.

Авторизация по ключу не могла вызвать "падений" сервера. И что вы подразумеваете под падением? Сервер недоступен по сети, сервер MInecraft перестаёт отвечать?

Comments

[Сергей Булатов]

Падение означает завершение работы ПО сервера с ошибкой и одновременное завершение ssh-сеанса. Логи есть в комментариях к вопросу

[ge]

Сергей Булатов, полагаю, проблемы с падением майнкрафта и отвалом SSH не связаны.
Попробуйте прописать указанные мной строки в ~/.ssh/config. Касаемо сервера Cuberite - у вас происходит Segfault, надо копать туда. Я с ним не знаком, поэтому, увы, подсказать не могу. Если приложение как-то перенастраивалось до падений, то попробуйте откатить настройки.