首页/云/可观测性速查/维护窗口:计划静默与收尾核对
告警与响应50 条

维护窗口:计划静默与收尾核对

计划维护三步:提前公告、按范围建限时静默、结束后核对积压告警;核心可用性告警保留窄通道,随时可叫停维护。

可观测性速查云更新于 2026-10-13

计划维护的三步

把计划维护做成标准动作:提前公告时间与影响范围,按范围建限时静默,结束后核对窗口内被压制的告警。核心可用性告警要保留一条窄通道,一旦出现意外随时可以叫停维护。缺口通常不在技术上,而在收尾——窗口内的真实故障没人回头确认。

三步动作

公告写清维护时间、影响范围、联系人,提前通知相关方
静默按服务或实例范围建限时静默,只覆盖本次维护对象
收尾核对窗口内被抑制的告警,逐条确认影响并要求确认

维护窗口流程

维护窗口流程
1 公告: 2026-10-15 02:00-04:00 数据库版本升级
2 静默: matchers [service="db-proxy"],期限 3 小时
3 盯防: 主干告警(全站探针)保持可用,异常时叫停维护
4 收尾: 导出窗口内被压制的告警,逐条确认是否有真实故障

收尾核对项

  • 导出窗口内所有被静默的告警,逐条确认是预期还是真故障
  • 核对维护目标是否达到,失败时按预案回滚并重新公告
  • 确认静默已到期或手工撤销,避免窗口过去仍持续压制
  • 把本次维护的时间、影响与结论记入值班日志
  • 维护前的静默由自动化在变更单进入执行状态时创建,减少人为遗漏
  • 维护结束前留出观察窗口,确认服务指标恢复平稳后再关闭静默
  • 静默时长比计划结束时间多留一段缓冲,避免收尾阶段仍有告警外发扰乱判断

静默与勿扰时段的选择

场景推荐手段原因
一次性割接升级临时静默范围与时长明确,结束后自然失效
周期性备份或批量任务勿扰时段(mute timings)按星期与时间循环生效
范围较大的发布窗口两者结合固定惯例用勿扰,单次特殊用静默
整个维护窗口静默一切,割接出错时也没有告警兜底;主干可用性告警必须保留可用通道,异常时能立刻叫停。

易错点

  • 维护窗口内静默一切,割接出错也没有告警兜底
  • 结束不核对积压告警,窗口内真实故障被放过
  • 静默范围按服务名模糊匹配,把无关告警一起压掉
  • 周期性维护用临时静默,每次都靠人记得手工创建,漏一次就整晚报警

数据来源与参考

  • Alertmanager 文档 · Silences
  • Grafana 文档 · Mute timings
​‌‌​​‌​​​‌‌​‌‌‌‌​‌‌​​​‌‌​‌‌‌​​‌‌​​‌​‌‌‌​​‌‌‌​​​‌​‌‌​‌​​‌​‌‌‌​​​‌​‌‌​‌​​‌​‌‌​​​‌‌​‌‌‌​‌​​​‌‌​‌‌‌‌​​‌​‌‌‌​​‌‌​​​‌‌​‌‌​‌‌‌‌​‌‌​‌‌​‌