首页/云/可观测性速查/Runbook:把排障动作写成一页纸
告警与响应50 条

Runbook:把排障动作写成一页纸

每个可行动告警配一页 runbook:症状、确认步骤、缓解动作、升级条件;链接放进 annotations,值班一键直达。

可观测性速查云更新于 2026-10-12

runbook 结构示例

runbook 结构示例
# HighErrorRate (service=order-svc)
## 症状与影响
## 确认(两步内看到关键数据)
  1. 看板链接
  2. sum by (code) (rate(http_requests_total{service="order-svc"}[5m]))
## 缓解动作
  - 回滚近期发布 / 切流 / 扩容
## 升级条件
  - 15 分钟未缓解:联系架构组
runbook 由一线编写、用真实排障迭代;季度巡检时顺手核对链接与命令是否仍有效。

易错点

  • 只写“检查系统状态”这类空话的 runbook 没有使用价值
  • 告警与 runbook 不做链接关联,值班在夜里要手动找文档

数据来源与参考

  • Google SRE Workbook · On-Call 与紧急响应
  • PagerDuty 文档 · Runbook 指南
​‌‌​​‌​​​‌‌​‌‌‌‌​‌‌​​​‌‌​‌‌‌​​‌‌​​‌​‌‌‌​​‌‌‌​​​‌​‌‌​‌​​‌​‌‌‌​​​‌​‌‌​‌​​‌​‌‌​​​‌‌​‌‌‌​‌​​​‌‌​‌‌‌‌​​‌​‌‌‌​​‌‌​​​‌‌​‌‌​‌‌‌‌​‌‌​‌‌​‌