首页/云/可观测性速查/指标与告警的归属:每个信号都要有人负责
监控体系与方法40 条

指标与告警的归属:每个信号都要有人负责

每条告警、每个关键指标都应有明确负责人与升级路径;无主告警会长期无人处理,是告警体系退化的起点。

可观测性速查云更新于 2026-10-13

归属是什么

归属是指每条告警、每个关键指标都有明确的负责团队与升级路径。无主告警的生命周期通常很短:先被忽略,再被静默,最后被删除。落地方法并不复杂——告警标签里带团队标识,路由按标签分发,值班未响应时自动升级到备份值班或主管;配合例会定期审视无主告警与长期静默,归属就不会随着组织变化而失效。

基本信息

落地方式告警标签带 team 或 owner,路由按标签分发
升级路径值班超时未响应时自动升级到备份值班或主管
配套机制定期审视无主告警与长期静默规则
责任主体团队而非个人,避免人员休假时无人接收

典型使用场景

  • 新建告警:规则提交时同时确定负责团队与 runbook 链接
  • 组织调整:团队重组后同步更新路由与标签
  • 值班兜底:未在时限内认领的告警自动升级
  • 周期性清理:季度审视无主告警与无人维护的规则
  • 责任透明:看板上标注负责人,避免数据无人解释

在规则里固化归属

在规则里固化归属
- alert: ApiHighErrorRate
  expr: sum(rate(http_requests_total{code=~"5.."}[5m]))
        / sum(rate(http_requests_total[5m])) > 0.05
  for: 10m
  labels:
    severity: critical
    team: order-platform          # 归属标签,路由按它分发
  annotations:
    summary: "订单接口错误率超过 5%"
    runbook_url: https://wiki.example.com/runbook/api-high-error
    dashboard_url: https://grafana.example.com/d/order-api

归属要素

要素内容缺失后果
负责人团队名称标签告警无人认领,长期堆积
升级路径超时后升级到谁夜间无人响应时告警静默流失
runbook处置文档链接值班收到后不知做什么
看板链接关键指标所在位置定位耗时被拉长
复核机制谁在什么周期审视规则腐化无人察觉
runbook_url 与看板链接是可行动性的关键:值班人点开就能看到处置步骤与影响面判断,把「找人问」的时间省下来。
归属写成团队而不是个人:个人成为接收人时,休假与离职会造成告警静默丢失,团队标签配合值班表才可持续维护。

易错点

  • 团队重组后路由未更新,告警流向已不存在的组,等于进入黑洞
  • 把归属写成个人而非团队,人员休假时告警无人接收,恢复时间被拉长
  • 无主告警长期挂在那里不被清理,值班逐渐对所有告警脱敏,真实故障也被一起忽略
  • 规则里没有 runbook 与看板链接,值班收到告警后从零开始找数据

数据来源与参考

  • Google SRE Workbook · 值班与告警实践
  • Alertmanager 文档 · 基于标签的路由
​‌‌​​‌​​​‌‌​‌‌‌‌​‌‌​​​‌‌​‌‌‌​​‌‌​​‌​‌‌‌​​‌‌‌​​​‌​‌‌​‌​​‌​‌‌‌​​​‌​‌‌​‌​​‌​‌‌​​​‌‌​‌‌‌​‌​​​‌‌​‌‌‌‌​​‌​‌‌‌​​‌‌​​​‌‌​‌‌​‌‌‌‌​‌‌​‌‌​‌