chupasaurus

Подзапрос же:

max_over_time(selection_cnt_success_by_source{source="selection_cnt_success_by_source_total"}[1d])[8d:1d]

Grafana рисует графики. Анализ и алерты должны делаться на основе тех же данных, которые вы в ней отображаете, выбор утилит зависит от конкретного источника.

Но до сих пор не имею представления, какой инструментарий используют профессиональные DevOps на своих Kubernetis-кластерах для этих целей.

Архитектура метрик и их обработки в k8s. Как правило для унификации используют Prometheus т.к. под него уже многое заточено в самом кубере.
Сами сервера, на которых крутятся узлы кубернетеса, мониторятся выбранным решением для всей инфраструктуры, будь-то Zabbix или какой-нибудь Ionix.

PAINT, или как натянуть знания о процессах на Wireshark.

ntopng