先定性再定量
存储性能问题难查，往往不是缺工具，而是缺顺序。可行的做法是先给问题定性：是带宽不足、时延过高、请求数打满，还是容量水位引发了连锁反应；再按「客户端—网络—存储前端—后端—介质」这条链自上而下逐段排除。每一段都对比「需求峰值」与「该段实测上限」，先找到第一个被打满的环节，再讨论优化手段。
基本信息
| 诊断顺序 | 定性问题类型 → 分段测量 → 定位首个饱和段 → 验证改动 |
|---|---|
| 必备数据 | 业务侧时延、分段吞吐、队列长度、容量水位 |
| 分段边界 | 客户端、网络、存储前端端口、后端环路、磁盘 |
| 判断依据 | 实测上限与需求峰值之差，而不是单点绝对值 |
| 输出物 | 瓶颈段、证据、可验证的改动方案 |
典型使用场景
- 业务反馈慢：先确认是读写哪个方向、哪类请求变慢
- 上线前容量评估：确认新业务峰值是否会打满某一段
- 故障后复盘：区分是容量、时延还是请求数先触顶
- 调优前后对比：用同一口径量化改动收益
- 扩容决策：先确认瓶颈段，避免扩容后照样慢
诊断六步
诊断六步
# 第 1 步 定性：慢在带宽、时延还是请求数？大块顺序与随机小块表现完全不同
# 第 2 步 取基线：请求量、平均与高分位时延、分段吞吐、队列长度
# 第 3 步 分段测：客户端、网络、前端端口、后端环路、磁盘逐段看利用率
# 第 4 步 找首个饱和段：谁先接近上限，谁就是当前瓶颈，不要跳步
# 第 5 步 单变量验证：一次只改一处，用同一压测口径复测
# 第 6 步 留档：把现象、指标、结论固化，避免同类问题重复排查问题定性对照
| 症状 | 优先怀疑方向 | 关键指标 |
|---|---|---|
| 大文件传输慢 | 带宽段：网络、前端端口、后端环路 | 各段吞吐与实际带宽上限 |
| 小块随机访问慢 | 时延段：介质寻道、队列积压 | 单次时延、队列深度、磁盘利用率 |
| 高并发下时延抖动 | 队列与排队：某段已饱和 | 队列长度、高分位时延 |
| 写入变慢、读取正常 | 容量水位或写入放大 | 容量使用率、写放大系数 |
| 所有操作一起变慢 | 公共依赖：元数据、鉴权、网络 | 各段公共组件耗时拆解 |
先量后调：没有基线数据的调优无法判断收益，也无法在改动恶化时回退。改动前务必记录一组可复现的对照数据。
存储侧重「容量、带宽、时延、请求数」四个维度同时观察，任何一个触顶都会表现为业务慢；只看利用率百分比容易被误导。