Alertmanager介绍

Alertmanager 是 Prometheus 监控体系的告警管理核心组件，独立于 Prometheus Server，负责接收 Prometheus 发送的告警信息，然后执行去重、分组、路由、静默、抑制等操作，最终通过邮件、钉钉、企业微信等渠道发送告警通知

Prometheus Server  →  触发告警规则  →  推送告警  →  Alertmanager  →  处理告警  →  发送通知
（负责指标采集+告警规则计算）       （HTTP POST 请求）  （去重/分组/路由）  （邮件/钉钉/短信）

Alertmanager 包含 5 个核心功能模块，按执行顺序排列：

1. 去重（Deduplication）：合并相同的告警，避免重复通知。
2. 分组（Grouping）：将相关告警合并为一个通知（如 “K8s 节点 1 和节点 2 磁盘满” 合并为一条通知）。
3. 静默（Silences）：手动设置告警静默期，指定时间内忽略特定告警（如维护期间）。
4. 抑制（Inhibition）：当一个严重告警触发时，抑制其引发的下游次要告警（如 “节点宕机” 抑制该节点上的所有 Pod 告警）。
5. 路由（Routing）：根据告警标签，将告警路由到不同的接收渠道（如 “数据库告警” 发 DBA 群，“服务器告警” 发运维群）。

核心功能详解

1、分组（Grouping）—— 避免告警刷屏

作用：将同一类告警合并为一条通知，减少通知数量。

• 配置维度：按告警标签（如 alertname、severity、job）分组。
• 示例场景：K8s 集群 10 个 Pod 崩溃，分组后只发一条 “10 个 Pod 崩溃” 的通知，而非 10 条。

2、静默（Silences）—— 临时屏蔽告警

作用：手动创建静默规则，指定时间内忽略特定告警，适合服务器维护、版本发布场景。

• 配置方式：
  1. 通过 Alertmanager Web UI 手动创建（推荐）。
  2. 通过 amtool 命令行工具创建（适合自动化脚本）。
• 示例：静默所有 severity=warning 且 job=redis 的告警，持续 1 小时。

3、抑制（Inhibition）—— 过滤连锁告警

作用：抑制由根因告警引发的衍生告警，减少无效告警。

• 示例场景：
  • 根因告警：node_down（节点宕机）。
  • 衍生告警：该节点上的 pod_unavailable、service_down 等。
  • 配置抑制后，触发 node_down 时，自动忽略所有衍生告警。

4、路由（Routing）—— 精准推送告警

作用：基于告警标签，将告警转发到不同的接收人 / 渠道，是 Alertmanager 最核心的功能。

• 路由树结构：配置一个根路由，然后通过 match 规则定义子路由，支持多层嵌套。
• 匹配规则：告警标签满足 match 条件时，进入对应子路由；否则走默认路由。