首页/开发/CI/CD 与发布速查/告警静默与发布期降噪
质量门禁与回滚51 条

告警静默与发布期降噪

发布或维护窗口内临时静默相关告警以减少噪声;使用时要限定范围与时长,并给关键告警保留兜底核对路径。

CI/CD 与发布速查开发更新于 2026-10-12
用途计划维护、发布窗口、演练期间的已知噪声
方式Alertmanager silence,或监控平台的维护窗口
要素匹配器、开始与结束时间、原因、创建人
风险静默掩盖真实故障:关键告警需要人工旁路核对

Alertmanager 静默(amtool)

Alertmanager 静默(amtool)
amtool silence add alertname=HighLatency \
  --duration=1h --comment="release window" \
  --alertmanager.url=http://alertmanager:9093
静默只对已知噪声使用:静默期间仍要人工查看核心 SLI 面板。

易错点

  • 批量静默范围过宽:真实故障被吞掉,检测时间被拉长
  • 静默到期未清理:长期静默使告警体系失去作用

数据来源与参考

  • Prometheus 文档(Alertmanager — Silences)
  • Google SRE Workbook《Alerting on SLOs》
​‌‌​​‌​​​‌‌​‌‌‌‌​‌‌​​​‌‌​‌‌‌​​‌‌​​‌​‌‌‌​​‌‌‌​​​‌​‌‌​‌​​‌​‌‌‌​​​‌​‌‌​‌​​‌​‌‌​​​‌‌​‌‌‌​‌​​​‌‌​‌‌‌‌​​‌​‌‌‌​​‌‌​​​‌‌​‌‌​‌‌‌‌​‌‌​‌‌​‌