顺序本身就是方法
二层排障的价值不在于知道多少命令,而在于按什么顺序走。四条原则最常用:先物理后逻辑,先单点后拓扑,最近变更优先复核,一次只改一个变量。按这个顺序走,绝大多数现场问题在两三小时内能收敛到明确结论;跳步和同时改多项,才是把简单问题拖成疑难问题的原因。
四条原则
- 先物理后逻辑:链路状态、协商速率与错包计数先过关,再查配置
- 先单点后拓扑:单终端故障不扩大排查范围,避免影响面被自己放大
- 变更关联:最近一次变更优先复核,多数故障与变更时间点吻合
- 一次一变量:改一项测一项,多改叠加会让故障不可归因
基本信息
| 记录要求 | 现象、依据、结论、下一步,四项分开写 |
|---|---|
| 留证要求 | 关键命令输出留存或截图,注明时间点 |
| 交接要求 | 排查记录可直接交接,不必口头复述 |
| 回退要求 | 改配置前明确回退方式,不达标立即还原 |
单变量对照模板
单变量对照模板
# 变更前:记录现象与数据(含时间戳)
# 变更:只改一个配置项
# 验证:复测同一指标
# 回退:不达标立即还原并记录常见误序
| 误序 | 后果 | 正确做法 |
|---|---|---|
| 直接改配置 | 原有现象被覆盖 | 先记录再动手 |
| 同时改多项 | 无法归因生效项 | 一次只改一个变量 |
| 扩大排查范围 | 影响面被放大 | 单点问题单点查 |
| 忽略变更记录 | 重复踩同一个坑 | 先查最近变更 |
排查过程本身要留记录:结论、依据与下一步,交接与复盘都依赖它。没有记录的排查,交接时等于从零开始。
证据规则:「通了」与「哪里出了问题」是两件事。把现象、数据、结论分开记录,结论必须指向可复现的证据而不是推测,否则复盘时无法判断当时的判断是否正确。