Как правильно организовать мониторинг Kubernetes-кластера с помощью внешнего Prometheus?

Question

[bigazzzz]

Добрый день!
Есть Kubernetes-кластер, который нужно мониторить. Есть сервер c Prometheus/Alertsmanager/Grafana не в кластере. Мониторить кластер используя сам кластер - мне кажется неправильным. Есть несколько решений -
1. Настройка прямого доступа к REST API
2. сAdvisor + kube-metric
3. Prometheus federation = Prometheus как под в K8s + работающий внешний Prometheus.
Поделитесь опытом - как наиболее правильно организовать мониторинг?