首页/云/可观测性速查/事故分级:SEV1-SEV4 与宣布机制
告警与响应50 条

事故分级:SEV1-SEV4 与宣布机制

SEV 描述事件影响面与指挥规模,与告警 P 级不是同一维度:一条 P1 告警可能演变为 SEV1 事故;分级由值班长或 IC 宣布,并配套退出标准。

可观测性速查云更新于 2026-10-13

事故分级是什么

事故等级描述的是影响面与所需的指挥规模,和单条告警的优先级不是同一维度:一条最高优先级的告警可能只是短暂抖动,也可能演变成需要全员响应的事故,判断依据是用户影响与资金风险。分级由值班负责人或事故指挥宣布,并配套明确的退出标准,避免事故状态长期悬挂、无人宣布结束。

基本信息

适用场景影响范围较大的线上故障与数据风险事件
分级维度影响面、资金与数据风险、需要协调的团队数
宣布人值班负责人或事故指挥
退出标准影响归零并观察一段时间后由指挥宣布关闭

典型使用场景

  • 核心不可用:支付或登录全挂,需全员响应并统一指挥
  • 主要功能降级:下单失败率上升,需指挥与专人对外沟通
  • 局部影响:单区域慢查询,小组处理即可
  • 内部任务失败:无用户影响,走常规工单
  • 复盘触发:达到一定等级的事故必须进入无责复盘流程

宣布与退出动作

宣布与退出动作
# 宣布后的标准动作
1. 建立事故频道,写明等级、影响面与当前判断
2. 指定角色:指挥、技术处置、沟通负责人
3. 确定状态更新节奏(如每 15 到 30 分钟一条)
4. 登记影响范围:受影响业务、地域、用户规模

# 退出标准示例
影响归零 -> 观察 30 分钟无复发 -> 由指挥宣布关闭 -> 排期复盘

# 注意:宣布事故不是追责,而是调动资源与明确指挥

事故分级参考

级别判据指挥规模示例
SEV1核心不可用或资金损失风险全员响应加指挥支付全挂、数据损坏风险
SEV2主要功能明显降级指挥加专职沟通下单失败率明显上升
SEV3局部影响小组处理单区域慢查询
SEV4无用户影响常规工单内部任务失败
升级规则影响面扩大时当场升级由指挥宣布单区域扩展到全国
分级是行动规模的决定器:宁可短暂过度响应,也不要反应不足;影响面持续扩大时应当场升级等级,而不是等复盘时再补记。
退出标准要提前定义:没有退出标准时事故状态会一直挂着,复盘与改进都无从触发,团队注意力也被长期占用。

易错点

  • 把宣布事故当成追责会让没人敢宣布,损失的是响应时间,代价远大于一次过度响应
  • 不设退出标准时事故状态长期悬挂,复盘与改进无从触发
  • 等级只写进记录而不改变指挥规模,分级就失去了实际意义
  • 认为告警优先级高就等于事故等级高,把两个维度混为一谈导致响应资源错配

数据来源与参考

  • PagerDuty Incident Response 文档 · 分级
  • Google SRE Book · 第 14 章
​‌‌​​‌​​​‌‌​‌‌‌‌​‌‌​​​‌‌​‌‌‌​​‌‌​​‌​‌‌‌​​‌‌‌​​​‌​‌‌​‌​​‌​‌‌‌​​​‌​‌‌​‌​​‌​‌‌​​​‌‌​‌‌‌​‌​​​‌‌​‌‌‌‌​​‌​‌‌‌​​‌‌​​​‌‌​‌‌​‌‌‌‌​‌‌​‌‌​‌