Почему идет высокая загрузка CPU?

Question

[Valdis12]

С недавнего времени половина ядер (6 из 12) стали показывать загрузку на 100%.
Данные из top:

Данные из htop:

Синяя шкала в htop обозначает, что все ЦП используется процессами с низким приоритетом.

В списке с процессами такой был только один (NI 19), отключение которого ничего не дало.

Где нужно искать проблему?

Comments

[aleks-th]

А сколько там активных процессов всего ?
Может там их 10000*0.6 %- как раз 6 ядер и отгрызет

[Valdis12]

Это все, дальше уже идут 0,0

[Дмитрий]

Страшные цифры монга показывает, ещё и докер с нодой, я бы туда копал

[Valentin Barbolin]

8 зомбаков

покажи

ps aux | grep 'Z'

[Valdis12]

Valentin Barbolin,
USER PID %CPU %MEM VSZ RSS TTY STAT START TIME COMMAND
root 3433213 0.0 0.0 0 0 ? Z Jul24 0:00 [node]
root 3433600 0.0 0.0 0 0 ? Z Jul24 0:00 [node]
root 3435905 0.0 0.0 0 0 ? Z Jul24 0:01 [node]
root 3438529 0.0 0.0 0 0 ? Z Jul24 0:00 [node]
root 3438938 0.0 0.0 0 0 ? Z Jul24 0:00 [node]
root 3489499 0.0 0.0 0 0 ? Z Jul24 0:00 [node]
root 3680082 0.0 0.0 0 0 ? Z Jul25 0:00 [node]
root 3699270 0.0 0.0 0 0 ? Z Jul25 0:00 [node]
root 3768184 0.0 0.0 0 0 ? Z Jul25 0:00 [node]
root 3770577 0.0 0.0 0 0 ? Z Jul25 0:01 [node]
root 3982278 0.1 0.0 0 0 ? Z 11:47 0:01 [node]

[ValdikSS]

Возможно, у вас запущены процессы в другом PID namespace, а не в том, в котором вы их смотрите, поэтому вы их не видите. Либо же троян/майнер скрывает их различными трюками (скрытием из procfs или опять же другим PID namespace).

Answer 1

[Zerg89]

Посмотри что за процессы зомби (колонка s с описанием z)

Comments

[Valdis12]

[Zerg89]

Valdis12, странно top говорит что их 8
Посмотри htop -t так будет понятнее какой процесс имеет много подпроцессов и сложит всю нагрузку в корневой процесс от подпроцессов

[Zerg89]

Valdis12,
Log rotate 6h работает и ещё куча процессов его копий ждут разблокировки файла похоже
(4h 3h) по идее он так долго работать не должен

[Valdis12]

вывод команды ps aux | grep 'Z'
root 3433213 0.0 0.0 0 0 ? Z Jul24 0:00 [node]
root 3433600 0.0 0.0 0 0 ? Z Jul24 0:00 [node]
root 3435905 0.0 0.0 0 0 ? Z Jul24 0:01 [node]
root 3438529 0.0 0.0 0 0 ? Z Jul24 0:00 [node]
root 3438938 0.0 0.0 0 0 ? Z Jul24 0:00 [node]
root 3489499 0.0 0.0 0 0 ? Z Jul24 0:00 [node]
root 3680082 0.0 0.0 0 0 ? Z Jul25 0:00 [node]
root 3699270 0.0 0.0 0 0 ? Z Jul25 0:00 [node]
root 3768184 0.0 0.0 0 0 ? Z Jul25 0:00 [node]
root 3770577 0.0 0.0 0 0 ? Z Jul25 0:01 [node]
root 3982278 0.1 0.0 0 0 ? Z 11:47 0:01 [node]

[Zerg89]

Valdis12, А что за проц? Может это глюк энергоэффективных ядер?, linux вроде не так давно их поддерживать начали
Просто странно что нагрузка на последние ядра или настраивали привязку процессов к ядрам?

[Valdis12]

Zerg89, Intel Core i7-8700 3.2 ГГц, до этого было все норм; насколько я знаю, никакую привязку не настраивали.

[Vitsliputsli]

Valdis12, зомби не расходуют CPU, они уже мертвы, это лишь признак того, что процессы нормально не завершаются, разбирайтесь почему.
Что касается CPU, то что непонятно? По выводу top видно, что glances и cadvisor сожрали 30%, остальные 20% сожрала node с товарищами. Вот и ваши 50%.
В htop другая картина, потому как он каждый выше указанный процесс разбил на отдельные потоки. В нем кстати тоже можно включить показывать их вместе.