Apache2 prefork — контроль над Индейцем?

Question

[iandriyanov]

Вопрощаю всех столкнувщихся или же когда то попадавших в ситуацию, подобно моей:


— Сервер Gentoo_x64

— Apache_mpm_prefork


Регулярно убивает всю память и превыщает LA. Адекватно отследить вообще не получается, моментально LA3 > LA9 и все! Железный ресет только помогает.


— Как отследить?

— Чем или как ограничить возможности Индейца, к примеру если процесс больше 1 гига, чтобы система валила такой процесс?

— Подскажите софт для записи системных счетчиков, к примеру слежка за процессами которые жрут память (Имя процесса, время)


Огромне всем спасибо. Устал уже бороться с нестабильностью и костылями. Любой возможной информации буду рад.

Answer 1

[Виталий Перетятько]

Как уже написали выше — поставьте ограничение на кол-во worker-ов апача, ну а перед апачем — nginx. Настройте чтоб всю статику отдавал именно он, к апачу пускал только динамику.

Comments

[iandriyanov]

джинкс и так уже стоит.

Answer 2

[Борис Сёмов]

Банально настроить максимальное количество «деток», согласно вашим ресурсам.
Если у вас разрастается сами процессы, что вряд-ли — надо искать причину, т.к. это не нормально, и надо не городить костыли, а решать проблему.

По поводу мониторинга и процессов по ресурсам/наличию/работоспособности, и их запуска/перезапуска/алертов, посмотрите monit, но это надо делать не вместо решения проблемы, а как «вариант на всякий случай» для повышения надёжности.

Comments

[iandriyanov]

Монит не умеет смотреть сколько процесс отожрал чтобы его кильнуть, на случай перерасхода.

[Борис Сёмов]

Каждый отдельный потомок? Да, не умеет. Сколько скушал родительский процесс и все его потомки, умеет.

[iandriyanov]

Пример. Иначе просто палец в небо.

[Борис Сёмов]

mmonit.com/monit/documentation/monit.html#resource_testing TOTALMEMORY

Answer 3

[Nastradamus]

MaxRequestsPerChild поставить 1 и посмотреть что будет. Потом поднять до 10 или выше (исходя из ситуации), если поможет.

Дело в том, что размер воркера равен размеру самой крупной задачи, когда-либо им выполняемой. И размер этот не уменьшается при отработки последующих задач влодь до убивания по MaxRequestsPerChild.

Comments

[Nastradamus]

По умолчанию часто бывает MaxRequestsPerChild равен 0, что очень плохо в Вашей ситуации.

[iandriyanov]

<IfModule mpm_prefork_module>
StartServers 2
MinSpareServers 3
MaxSpareServers 5
ServerLimit 75
MaxClients 75
MaxRequestsPerChild 1000

[Nastradamus]

MaxRequestsPerChild 1-10 попробуйте.

А то ведь 7 процессов на 1000 запросов всю память сожрут в случае проблемных скриптов.

[iandriyanov]

Это заводские настройки. Но я попробую

[Борис Сёмов]

Что у вас находится за apache, сколько памяти в системе, и сколько из неё должно выделяться собственно веб серверу?

[Борис Сёмов]

Я к тому, что 75 деток апача могут и и без утечек скушать память… Если у вас впереди ещё nginx стоит, то вполне возможно столько-то и не нужно.
Вы в top смотрели? Сколько процессов apache в момент возникновения проблем? Сколько кушает каждый из них памяти?

[iandriyanov]

Не успеть посмотреть. Моментом LA подпрыгивает и все.

Но кажеться сегодня утром я обнаружил проблему, уже на баг репорте Гентушном. Вроде как ксенья виновата.

[Борис Сёмов]

А по подробнее?

[iandriyanov]

bugs.gentoo.org/show_bug.cgi?id=412743

Answer 4

[bdmalex]

На мой взгляд стоит смотреть в сторону скриптов, которые отжирают много памяти и заняться их оптимизацией

Answer 5

[AnViar]

Отследить: написать самому скрипты или использовать готовые, например
Ограничить: самый прямой способ ограничить процесс по памяти — виртуализация. Рассмотрите openvz, xen, kvm. Можно так же поиграться с limits.conf на уровне пользователя.

Comments

[Борис Сёмов]

Ну зададите вы лимит, и что? Апач просто упадёт. Это не решит проблему, как таковую.

[AnViar]

Упадет конкретный потомок, что и требуется в задаче.

[Борис Сёмов]

На самом деле требуется не бороться со следствиями а найти причину. Где-то память течёт, дыру надо залатать. Можно, конечно, убивать разросшиеся процессы, или сильно уменьшить MaxRequestsPerChild, но это не решение а костыль, позволяющий не обращать внимание на проблему.

[iandriyanov]

Я очень рад подумать над этим. Но уже вторые сутки головняка. А толку ноль! Как найти дыру, куда воткнуть тампон?

Answer 6

[BasilioCat]

Может быть вам и не нужен апач вовсе? Python/Django и Ruby/Rails отлично работают как FastCGI серверы, запросы к которым можно пробросить напрямую из Nginx. PHP-FPM — и подавно. Perl/CGI и Perl/mod_perl используются теперь редко, тут да, без апача никуда. Хотя для простого CGI есть и более легковесные сервера. Если у вас не массовый хостинг для клиентов, а несколько сайтов для себя, возможно одного nginx'а вполне хватит