| 症状告警 | 错误率、延迟、可用性等结果指标,直达用户影响 |
|---|---|
| 原因告警 | 容量、复制状态、健康检查等前置信号,留出缓冲时间 |
| 分页原则 | 症状告警进值班电话;原因告警按紧急度进入工单或低等级通知 |
两类告警示例
两类告警示例
# 症状告警(用户视角):5 分钟错误率超过 5%
sum(rate(http_requests_total{code=~"5.."}[5m])) / sum(rate(http_requests_total[5m])) > 0.05
# 原因告警(前置信号):主从延迟超过 30 秒
mysql_slave_status_seconds_behind_master > 30原因类信号数量多(磁盘、连接数、副本抖动),全部做电话告警会造成告警疲劳;分页留给用户可感的结果指标。