首页/云/可观测性速查/告警疲劳:信号识别与治理顺序
告警与响应50 条

告警疲劳:信号识别与治理顺序

疲劳信号:值班对通知麻木、静默成习惯、故障靠用户先发现;治理先删无效再修阈值,减少数量比优化样式更见效。

可观测性速查云更新于 2026-10-12

疲劳自查(示例)

疲劳自查(示例)
[ ] 近一月“收到但没动手”的告警占比 > 20%
[ ] 手动静默每周出现
[ ] 值班换班请求增多
[ ] 有过故障由用户反馈先发现
  • 治理顺序:删除无效告警,再修阈值与窗口,再谈分组抑制
  • 把“页面级”的准入标准写进团队规范并定期复核
疲劳的本质是信噪比问题:长期不治理会直接抬高发现时间,用户会比监控更早发现故障。

易错点

  • 用“关掉通知”缓解疲劳会留下监控盲区
  • 只优化消息格式不减少数量,疲劳很快回到原样

数据来源与参考

  • Google SRE Book · 第 6 章
  • PagerDuty 文档 · 告警疲劳
​‌‌​​‌​​​‌‌​‌‌‌‌​‌‌​​​‌‌​‌‌‌​​‌‌​​‌​‌‌‌​​‌‌‌​​​‌​‌‌​‌​​‌​‌‌‌​​​‌​‌‌​‌​​‌​‌‌​​​‌‌​‌‌‌​‌​​​‌‌​‌‌‌‌​​‌​‌‌‌​​‌‌​​​‌‌​‌‌​‌‌‌‌​‌‌​‌‌​‌