Как мониторить нагрузку на web сервер для каждого домена?

Question

[Сергей]

Добрый день, имеется сервер на котором висит порядка 50 сайтов, появилась задача выяснить какие сайты и сколько потребляют ресурсов сервера (память, цпу, интернет трафик, а так же нагрузку на mysql ) чем можно мониторить проекты, как это делают хостинг компании!

Answer 1

[Александр Черных]

У нас для каждого вебпроекта создан свой php-fpm пул, это дает возвожность мониторить проект в мунине.
Запущено несколько экземпляров mysql на разных портах, бд форума на своем порту, банерокрутилка на своем, ряд баз не сильно нагружаемых на своем порту - это тоже дает возможность оценить нагрузку, и вообщемто быстро найти виноватого.

Можно разнести проекты по нескольким вирт машинам, но как было уже отмечено выше - это оверхед по памяти и дискам. Но оно того стоит.

Как-то так

Answer 2

[ky0]

Хостинг-компании не сайты мониторят (если они не расположены на разных экземплярах веб-серверов и СУБД), а пользователей или виртуальные машины. Некоторые шареды так и вовсе просто ставят конские ограничения, так что даже при большом желании сильно нагрузить сервер не удастся - скрипты и запросы в базу будут автоматически убиваться по таймауту или превышению потреблённых ресурсов. А те, у которых VPS - не смотрят, что происходит внутри, т. е. кто генерирует нагрузку, ограничиваясь только её наличием в принципе.

В вашем случае - я бы разнёс сайты (или группы сайтов) по разным контейнерам и мониторил бы их по отдельности. Разумеется, в этом случае будет некоторый оверхед по памяти из-за использования нескольких баз и веб-серверов.

Answer 3

[Владимир]

Мы у себя не мониторим нагрузку сайтов или юзеров (на шаред серверах) - каждому юзеру в его микроконтейнере выдано некоторое колво цпу/памяти/ИО в соответсвии с тарифом и все.
Мониторится же доступность сервисов на сервере и классические нагрузка на цп,/использование памяти и тд, в случае аномалий идем, смотрим, разбираемся что и почему.

Comments

[Сергей]

как в моем случае подсчитать какие ресурсы сколько потребляют? или это не возможно?

[Владимир]

возможно но весьма ограниченно + зависит от конфиграции вашего вебсервера
- при помощи например zabbix3 можно настроить иониторинг цпу потребления всех процессов определеных польователей - так мы увидим нагрузку php и кронов,
но есть еще apache и mysql, там с мониторингом все плохо - у апача есть server-status но нагрузку по каждому сайту оттуда получать я готовых решений не видел.
для mysql есть mysqladmin pr но тоже как трасформирывать его вывод в какюто статистику конкретных пользователей вопрос открытый.

у нас на работе используется cPanel + Cloudlinux и благодоря Cloudlinux (его утилитам) мы можем посмотреть статистику потребления ресурсов пользовательского контейнера + нагрузку на mysql(приблизительно)

[Сергей]

Владимир: спасибо большое за объяснение!