Prometheus 已经成为云原生监控的事实标准。整个生态包含诸多组件，为了简化安装部署和配置高可用等，社区开发了kube-prometheus项目。接下来用一系列文章介绍一下相关配置。

项目简介：
kube-prometheus 是一个基于 Kubernetes 部署的 Prometheus 和 Grafana 监控系统的完整解决方案，是 Prometheus Operator 的实现之一。
相比于手动安装并配置 Prometheus、Alertmanager、Grafana 等单个组件，使用 kube-prometheus 可以节省部署和管理Prometheus监控生态组件的时间和精力。同时，kube-prometheus 还提供了可自动化的滚动更新和自适应扩展等功能，以适应动态变化的 Kubernetes 集群。
Prometheus 和 Alertmanager 组件被配置为statefulset类型，并且默认高可用。
并且默认安装并配置了node-exporter, blackbox-exporter, kube-state-metrics和prometheus-adapter组件。
内置了很多常用的 Grafana Dashboard
项目地址： https://github.com/prometheus-operator/kube-prometheus/

kube-prometheus 安装后创建的CRD及作用

CRD	作用
alertmanagerconfigs	alertmanager配置
alertmanagers	alertmanager实例
podmonitors	通过selector选择被监控的pod和metrics 端点
probes	创建blackbox监控目标
prometheuses	Prometheus实例
prometheusrules	创建告警规则
servicemonitors	创建监控目标
thanosrulers	数据集中存储

安装
安装非常简单
参考项目github主页，注意不同版本与kubernetes兼容性（主页有兼容性矩阵）。
建议下载与kubernetes版本兼容的最新的版本。
安装命令：

kubectl apply --server-side -f manifests/setup
kubectl wait \--for condition=Established \--all CustomResourceDefinition \--namespace=monitoring
kubectl apply -f manifests/

如果要修改Prometheus配置就编辑prometheuses 这个CR，直接编辑statefulset是没作用的。如要修改Prometheus pod的resource request和limits，或者数据保留天数 retention:（默认30d），或者为Prometheus挂载持久化存储。

kubectl -n monitoring edit prometheuses k8s 

如果要修改Alertmanager配置就编辑alertmanagers这个CR，直接编辑statefulset是没作用的。如修改日志级别为debug 以调试。

kubectl -n monitoring edit alertmanagers main

Grafana 直接修改deployment。如持久化存储等。

kubectl -n monitoring edit deployments.apps grafana