| 诊断 | 告警总量 vs 实际行动转化率 |
|---|---|
| 治理 | 分级 + 合并 + 删除噪声源 |
| 目标 | 每条告警都能对应行动 |
分级示例
分级示例
P1 立即：生产可用性、数据损坏风险 → 呼叫值班
P2 排期：门禁红、反复 flaky → 当迭代修复
P3 记录：低风险提示 → 仪表盘可见，不打扰回顾节奏：每季度统计各规则触发次数与行动转化率，长期零行动的规则降级或删除。
告警疲劳与质量告警治理
质量与监控告警过多会导致整体忽略（告警疲劳）：按可行动性分级（立即处理/排期/仅记录），周期性审查告警规则与阈值，删除长期无行动的噪声告警。
易错点
- 所有告警一个通道：重要信号被噪声淹没
- 只调阈值不减条目：噪声换形式继续存在
数据来源与参考
- Google SRE 工作手册（告警与噪声治理章节）