Prometheus监控实战：从指标采集到告警通知的完整指南

【免责声明：本文由AI辅助生成，内容仅供参考，不构成专业建议。】

Prometheus监控实战：从指标采集到告警通知的完整指南

Prometheus是云原生时代最流行的监控系统，本文介绍从部署到告警的完整实践。

Prometheus核心概念

指标类型：Counter（只增计数器）、Gauge（当前值）、Histogram（直方图）、Summary（摘要）。

数据模型：指标名 + 标签集 + 时间序列。灵活的标签系统支持多维数据模型。

工作模式：Pull模式，Prometheus主动拉取指标。优于Push模式，易于监控无代理应用。

Prometheus部署

二进制部署：下载Prometheus二进制文件，修改prometheus.yml配置启动。适合简单场景。

Docker部署：docker run prom/prometheus启动容器。快速验证。

Kubernetes部署：使用Prometheus Operator管理。适合K8s环境。

指标采集

Exporter：Exporter将系统指标转换为Prometheus格式。常用Exporter：node_exporter（系统）、mysqld_exporter（MySQL）、postgres_exporter（PostgreSQL）、blackbox_exporter（HTTP/TCP）。

应用埋点：应用直接暴露/metrics端点。使用Prometheus客户端库（Python、Go、Java等）。

服务发现：K8s服务发现、Consul、文件SD。动态发现监控目标。

告警配置

Alertmanager：处理Prometheus的告警，支持分组、抑制、静默。与Prometheus分离部署。

告警规则：使用PromQL定义告警条件。示例：up == 0（实例宕机）、rate(http_requests_total[5m]) > 100（流量异常）。

告警通知：配置Alertmanager发送邮件、钉钉、企业微信、Webhook等。

可视化

Grafana集成：Grafana是Prometheus的最佳拍档。官方提供大量Dashboard模板。

常用Dashboard：Node Exporter Full、Golang Runtime、Kubernetes集群概览。

变量模板：使用Grafana变量实现Dashboard复用。一个Dashboard适配多个环境。

高级实践

Remote Write：Prometheus将数据远程写入Long-term Storage（Thanos、InfluxDB）。实现历史数据长期存储。

Thanos：Prometheus的长效存储和全局视图解决方案。支持跨集群聚合、历史数据查询。

高可用：部署多个Prometheus实例，Alertmanager集群。避免单点故障。

更多技术文章：https://blog.hanyucloud.com | 客服：400-880-3980