Инструменты/библиотеки для сбора статистики высоконагруженного проекта?

Question

[hiker]

Нужно реализовать мониторинг высоконагруженного (десятки тысяч запросов в минуту) проекта на PHP по ряду показателей. Первое что пришло в голову — писать прямо из кода данные в мемкеш, потом производить агрегацию и строить графики. Какие существуют уже готовые решения/наборы библиотек для реализации задачи?

Смотрел в сторону munin — не хватает возможности строить сложные кастомные графики, но подобная система плагинов подошла бы идеально.

Answer 1

[Vampiro]

habrahabr.ru/company/bitrix/blog/144482/#habracut?

Answer 2

[Push_Ok]

отчеты и таймеры отлично делает pinba, очень быстро пишет, отчеты составляет сам, собирает агрегирует, графики соответсвенно отдельно в ррд например.

Comments

[niakrisn]

Да, хорошая штука, но агрегирует всего определенное в конфиге кол-во запросов, поэтому обязательно нужно будет данные складывать куда-то еще.

[Push_Ok]

что бы просто собрать милиард данных вам придеться еще инфраструктуру придумывать, поэтому собирать все подрят не то что бесполезно, но и вредно. Поэтому достаточно заранее понять что собирать, и переодически по необходимости добавлять если что-то надо. Что касаеться того что агрегирует то что в конфиге опередено не совсем так. Для формирования нового отчета по текущим метрикам надо просто создать новую таблица с правильным коментом. и она тут же начнет его строить.

Answer 3

[Push_Ok]

habrahabr.ru/company/badoo/blog/149695 кстати