| 关键命令 | uptime / ps D 状态 / iostat -x |
|---|---|
| D 状态定义 | TASK_UNINTERRUPTIBLE |
定位步骤
定位步骤
uptime
ps -eo state,pid,wchan:24,comm | awk '$1=="D"'
iostat -x 1 3
cat /proc/loadavg本包目录（357 条）
sysctl 内核参数72 条
CPU 与调度60 条
- load average 负载均值解读
- top 中 CPU 各项含义
- lscpu 查看 CPU 拓扑
- vmstat：cs 列与 r/b 队列
- CFS 调度器与 vruntime
- 上下文切换开销与观测
- nproc 可用处理单元数
- pidstat -w 进程级切换分析
- /proc/stat 累计计数解读
- sched_rt_runtime_us 实时带宽限制
- /proc/loadavg 字段速读
- sched_min_granularity_ns 最小调度粒度
- sched_latency_ns 调度周期
- EEVDF 调度器（6.6 起）
- sched_wakeup_granularity_ns 唤醒抢占粒度
- cgroup v2 cpu.max CPU 限额
- 隔离核：isolcpus / nohz_full / rcu_nocbs
- sched_migration_cost_ns 迁移代价窗口
- chrt 设置调度策略与优先级
- cgroup v2 cpu.weight 相对权重
- cgroup v2 cpuset 核心与节点绑定
- cpufreq 调频调速器
- CPU 使用率高排查流程
- sched_nr_migrate 批量迁移任务数
- nice / renice 调整普通优先级
- taskset 绑定 CPU 亲和性
- 平均负载高但 CPU 空闲的排查
- systemd 单元 CPU 资源控制
- 温度与降频排查
- 软中断与 ksoftirqd 排查
- numa_balancing 自动 NUMA 均衡
- numactl 绑定核与内存节点
- PREEMPT_DYNAMIC 抢占模型
- soft lockup 排查
- tuna 查看与调整线程/中断亲和
- vmstat 的 r 列：运行队列长度
- cgroup v2 cpu.stat 节流诊断
- cgroup v2 pids.max 进程数限制
- intel_pstate 驱动与 EPP
- turbostat 频率与 C-state 观测
- 用户态与内核态占比判读
- kworker 高占用排查
- irqbalance 中断均衡服务
- 中断亲和性手动绑定
- threadirqs 中断线程化
- PSI CPU 压力指标
- sched_debug 调度器视图
- sched/features 调度特性开关
- cpuidle 空闲状态管理
- steal time 判读（虚拟化）
- cyclictest 实时延迟测量
- 实时优先级权限（rtprio 限制）
- sched_rr_timeslice_ms 轮转时间片
- 线程级排查：ps -eLf / top -H
- pidstat -t 线程级统计
- cpupower 频率与 C-state 管理
- mpstat 每核利用率与中断分布
- 调度调参方法论
- schedstat 调度统计
- CPU 逻辑核上下线
平均负载高但 CPU 空闲的排查
Linux 的平均负载把不可中断睡眠（D 状态，多为等 IO）计入；负载高而 CPU 空闲通常是磁盘或网络文件系统阻塞。
易错点
- D 状态进程的 wchan 指向等待点，需结合应用日志判断是磁盘还是网络存储
- 虚拟机上还要排除宿主 steal 时间造成的假高负载
数据来源与参考
- Linux 内核 Documentation/filesystems/proc.rst（loadavg）
- sysstat 文档 iostat(1)