Как предотвратить зависание linux сервера при нехватке озу/цпу?

Question

[Splite]

Здравствуйте! Уже довольно долго наблюдаю такую проблему, на сервере работают несколько очень ресурсоемких java-приложений, периодически сервер полностью виснет (не отвечает по ssh, помогает только перезагрузка хостером). Отследить проблему никак не получается, хостер ничего внятного не советует, в логах ничего интересного. Возможно ли, что такое происходит от нехватки ресурсов? Что можно сделать?

Comments

[Влад Животнев]

Вам лучше на фрилансим, там помогут. Телепатов пока не нарожали, чтобы на все подобные вопросы отвечать.

[Виктор]

У меня была подобная проблема на сервере у хостингера.
1. atop - сервис который записывает в логи каждую секунду какие программы сколько ресурсов потребляют.
2. в cron добавить команду echo 3 > /proc/sys/vm/drop_caches - это сброс кэша файлов которые использовались для отработки программ. Ставиться периодически, в зависимости от частоты загрузки памяти, к примеру каждый час. мне помогло.

Answer 1

[Армянское Радио]

Как найти причину падения сервера?

Вы наивно полагаете, что у экстрасенсов астральный отпуск имеет длительность всего в неделю?

Все общие фразы по поводу отыскания глюков на сервере вам уже выдали.

Answer 2

[Владимир]

не допускать "пережора" ресурсов, выставив ограничения для приложений на память и проц через Control Groups (cgroup)
пример ручного управления ограничениями памяти

Защищаем сервер от исчерпания ресурсов с помощью c...

Answer 3

[ramjke]

Похоже на Out of memory. Уверены, что в syslog нет ничего интересного?
Сколько свободной оперативной памяти остаётся после запуска всех необходимых приложений?
Попробуйте добавить оперативы.

Comments

[Влад Животнев]

у sshd oom_adj_score не позволяет убивать его oom-ом.

Answer 4

[Алексей Черемисин]

Установите лимиты, пусть процессы пистреливаются системой, а уже по core-файлам будете разбираться что происходит. Лишь бы процессы в swap не уходили.. Ну и профильнуть ваши приложения не помешает, и поставьте мониторинг какой нибудь, типа collectd + influxdb + grafana

Answer 5

[angry_cellophane]

Попробуйте посмотреть sar логи: цпу, память, io, network. Определите сначала root cause, говорить про нехватку памяти преждевременно.