С одной стороны в приложении логгируем количественные характеристики вида
stat.log_event(operation, operation_duration, param1, param2, param3, ...)
С другой стороны строим графики по операциям (operation) в разрезе параметров (указываем произвольное подмножество параметров, их группировки), времени (вчера, неделю назад, месяц назад), целевой функции (max, min, avg).
Вопрос в том, не встречали ли вы подобные сервисы? Если нет, то какими решениями пользуетесь для подобных задач?