Сколько Nodejs сервер должен есть памяти сервера?

Question

[Jekins D&D]

Всем доброго времени суток.
Столкнулся со следующей ситуацией и по-моему это не нормально:
У меня на сервере стоит MySQL база данных, на ней висят 2 сайта с маленькой посещалкой (500-700 человек в сутки), так вот эта база съедает 500-600 мб памяти сервера и как мне объяснили, это слишком много и мне необходимо базу оптимизировать. Может быть, база большая, обрабатывает запросы и возможно обращения к ней не особо оптимизированы, не знаю, но это может быть.
Но вот я поднял Nodejs сервер с самым стандартным api c CRUD на борту. Посмотрел сколько съедается памяти и обомлел, больше 1000 мб занимает Nodejs сервер, которые в данный момент даже запросы не обрабатывает, он просто запущен для личного использования. Это вообще нормально? Нод сервер так и должен есть память? Или у меня скорее всего где-то утечка памяти в конфигурации нод сервера?

Answer 1

[Сергей Соколов]

По умолчанию процесс Node.js расчитывает, что ему доступны аж 1.5 Gb памяти.

Параметр --max_old_space_size задаёт максимальный размер т.н. Old Space – части Heap, куда попадают неактивные и не нужные данные. Это, на практике, область, занимающая наибольшую память. Именно её есть смысл ограничить, чтобы процесс Node занимал поменьше памяти.

Но у меньшей памяти есть и своя цена: чаще будет запускаться «сбор мусора» (garbage colleciton) – процесс очистки из памяти неиспользуемых данных, к которым более нет ссылок из глобальных или активных локальных переменных. Это блокирующий процесс – Node полностью останавливается на время очистки памяти, не реагирует на запросы и не выполняет никаких действий.

Итого, чтобы занимать меньше памяти, нужно запускать Node с параметром:
node --max_old_space_size=128 index.js
Тут указано занимать под old data не более 128 Mb памяти, т.е. весь Node займёт незначительно больше.

Можно задать переменную окружения WEB_MEMORY которой установить доступный процессу node.js объем памяти в Mb: WEB_MEMORY=128 bash startup.sh , если использовать для запуска node приложения скрипт, предложенный автором статьи (на англ.), откуда я всё это только что сам узнал )

Comments

[Jekins D&D]

Ок, спасибо. Тогда еще вопрос, а "можно", это значит нужно? То есть если я ограничу объем памяти до 256 мб для веба, это не сделает работу сервера очень тормознутой и не юзабильной? Или с объемом памяти надо играться в зависимости от нагрузки на сервер? Типо пока я сам с ним играюсь, то можно 128 мб, а когда пойдет народ, тогда надо будет поднимать до 1гб.
Но в итоге, то что у меня он жрет 1гб, это нормально? Он просто разложился на всю доступную память как я понял.

Answer 2

[dummyman]

У меня на сервере стоит MySQL база данных, на ней висят 2 сайта с маленькой посещалкой (500-700 человек в сутки), так вот эта база съедает 500-600 мб памяти сервера и как мне объяснили, это слишком много и мне необходимо базу оптимизировать.

Небось сайты Wordpress. Отключайте плагины, господа. И да прибудит вам производительность БД.

Но вот я поднял Nodejs сервер с самым стандартным api c CRUD на борту. Посмотрел сколько съедается памяти и обомлел, больше 1000 мб занимает Nodejs сервер, которые в данный момент даже запросы не обрабатывает, он просто запущен для личного использования.

Ищите утечки. Когда сервер запускается, сколько он весит? Каждый запрос увеличивает аппетиты? - Вы что-то сделали не правильно!

Comments

[Jekins D&D]

Небось сайты Wordpress.

Нет, на DLE, плагины есть, но он стартуют по моей указке, а не крутятся в бг

Вы что-то сделали не правильно!

Да вот не понятно что можно было сделать не правильно, так как это самый простой CRUD, сделанный по уроку на хабре

Когда сервер запускается, сколько он весит?

Вот 1гб и весит при старте

Каждый запрос увеличивает аппетиты?

Позже тестану и посмотрю. Как понимаю, если будет еще больше есть при запросах, то точно утечка памяти в настройке сервера?

[dummyman]

Jekins: Гб на старте? Что ж за урок такой на хабре, найдете ссылочку?

[Coder321]

Jekins: банальный вопрос, как вы смотрите количество используемой памяти? У меня апиха больше чем нв 100 эндпоинтов и без нагрузки жрет не больше 50-100 мб

[Jekins D&D]

dummyman: вот что-то вроде этого: https://habrahabr.ru/company/ruvds/blog/321104/

Coder321: вот команда:

ps -eo size,pid,user,command | awk '{ hr=$1/1024 ; printf("%13.6f Mb ",hr) } { for ( x=4 ; x<=NF ; x++ ) { printf("%s ",$x) } print "" }' | sort