首页/系统/Linux 内核与性能调优速查

Linux 内核与性能调优速查

sysctl 内核参数、CPU 与内存管理、磁盘 IO、网络栈调优、性能分析工具与瓶颈定位：Linux 系统调优速查。

共 357 条更新于 2026-10-12所属领域：系统

共 357 条

sysctl 内核参数

网络、内存与句柄等常用参数调优

net.ipv4.tcp_congestion_control 拥塞控制热门

选择本机新连接使用的拥塞控制算法（默认 cubic）；高延迟带一定丢包的长肥管道常改用 bbr 提升吞吐稳定性。

net.core.somaxconn 全连接队列上限热门

限制 listen 套接字 accept 队列的长度上限，实际生效值为 min(应用 backlog, somaxconn)；高并发短连接服务的常见瓶颈点。

sysctl 查看与修改内核参数热门

读写运行时内核参数的入口命令：sysctl 直接对应 /proc/sys 下的文件，-w 修改立即生效但不持久，正式变更应落盘到配置文件。

vm.swappiness 换页倾向热门

控制内核把匿名页换出到 swap 的倾向（0-100，默认 60）；数据库与延迟敏感服务常降低它减少换出抖动。

net.ipv4.tcp_tw_reuse TIME_WAIT 复用热门

允许把处于 TIME_WAIT 的套接字在协议安全前提下复用于新的出站连接（依赖时间戳）；只对客户端方向的连接有效。

TCP Keepalive 三参数速查

空闲连接保活探测：默认约 2 小时才发首个探测包，对穿越 NAT/防火墙的长连接通常过慢，需要按链路回收时间调小。

net.ipv4.ip_local_port_range 本地端口范围

本机主动连接可用的本地端口区间，默认 32768-60999（约 2.8 万个）；高并发出站（代理、网关、压测客户端）会先耗尽端口。

sysctl.d 配置持久化

把内核参数固化到 /etc/sysctl.d/*.conf，按文件名字典序合并加载；sysctl --system 重载全部配置，适合与发行版默认值分层管理。

net.ipv4.tcp_rmem 接收缓冲自动调优

三个值分别是最小/默认/上限的接收缓冲（默认 4096 131072 6291456）；内核按链路 BDP 自动调节，上限决定单连接吞吐天花板。

net.ipv4.tcp_max_syn_backlog 半连接队列

控制 SYN 半连接队列（尚未完成三次握手的请求）的容量上限；队列满时新 SYN 可能被丢弃或触发 syncookies。

vm.overcommit_memory 内存超售策略

控制内核接受内存申请的宽松程度：0 启发式判断、1 总是允许、2 严格拒绝超售；影响 fork、大页与数据库行为。

net.netfilter.nf_conntrack_max 连接跟踪表上限

NAT/防火墙连接跟踪表容量上限；打满后新连接被丢弃并打印 table full 日志，是网关类主机的高频瓶颈。

vm.max_map_count 内存映射数量上限

限制单个进程可持有的内存映射区域数（默认 65530）；搜索引擎、JVM、游戏服务器等大量 mmap 的应用常需要提高。

net.ipv4.tcp_syncookies SYN Cookie 防护

在半连接队列溢出时用无状态的 SYN Cookie 完成握手，避免队列耗尽导致正常新连接被拒；默认开启，代价是触发时部分 TCP 选项协商受限。

vm.dirty_ratio 脏页回写硬阈值

脏页占内存百分比达到该值（默认 20）时，写进程被迫参与同步回写，是写抖动（write stall）的常见来源。

/proc/sys 参数文件树

所有 sysctl 参数的运行时视图都在 /proc/sys 下，目录层级与点号命名严格对应，cat 读、echo 写，容器中多为命名空间隔离或只读。

net.ipv4.tcp_syn_retries 主动建连接重试

控制本机作为客户端发起连接时 SYN 的重传次数；默认 6 次累计等待约 2 分钟才放弃，内网服务常下调以快速失败。

net.core.netdev_max_backlog 收包积压队列

每个 CPU 内核收包队列的长度上限（默认 1000）；小包高 PPS 场景队列打满会丢包，可在 softnet_stat 中确认。

net.ipv4.ip_forward IPv4 转发开关

控制内核是否转发非本机地址的数据包；容器网络、NAT 网关、VPN、软路由都需要开启它。

net.core.rmem_max / wmem_max 套接字缓冲上限

单个套接字接收/发送缓冲区的硬上限（默认各 212992 字节）；应用 setsockopt 与自动调优都受它封顶，长肥管道场景需要提高。

net.ipv4.tcp_wmem 发送缓冲自动调优

发送侧缓冲自动调优的最小/默认/上限（默认 4096 16384 4194304）；大流量回源或推流场景可放宽上限提升突发吸收能力。

net.ipv4.conf.all.rp_filter 反向路径过滤

校验入包源地址是否可经同一接口回程；0 关闭、1 严格、2 松散（任意接口可达即可），是反地址欺骗的加固项。

fs.file-max 系统文件句柄上限

整个系统可打开的文件描述符总数上限，内核按内存规模自动计算初值；单进程限制则来自 limits。

net.ipv4.tcp_fin_timeout FIN_WAIT2 超时

控制主动关闭方在 FIN_WAIT2 状态等待对端 FIN 的超时秒数（默认 60）；它不影响 TIME_WAIT 时长。

net.core.default_qdisc 默认队列规则

新网卡默认使用的队列规则（现代内核为 fq_codel）；启用 BBR 时常见搭配 fq，低延迟转发场景可关注 codel 系列算法。

fs.inotify.max_user_watches 监听配额

每个用户可注册的 inotify watch 总数（默认 8192）；文件同步、构建工具、监控代理耗尽后会报错。

net.ipv4.tcp_synack_retries 服务端握手重试

服务端在收到 SYN 后重传 SYN+ACK 的次数；默认 5，对端迟迟不回 ACK 时该连接最终被回收。

net.ipv4.tcp_fastopen TCP Fast Open

允许在 SYN 报文中携带数据（TFO），省去一次往返时延；取值 1 仅客户端、2 仅服务端、3 两端（按位组合）。

vm.dirty_background_ratio 后台回写阈值

脏页占内存比例达到该值（默认 10）时启动后台回写线程异步刷盘；与 dirty_ratio 一前一后控制回写节奏。

net.ipv4.tcp_mtu_probing PMTU 黑洞探测

当路径出现 ICMP 被拦截的 PMTU 黑洞时，内核可主动二分探测路径 MTU；0 关闭、1 检测到黑洞后启用、2 始终启用。

vm.panic_on_oom OOM 时是否崩溃

控制内存耗尽时内核行为：默认调起 OOM killer 杀进程，或配置为直接 panic（配合自动重启变成整机重启）。

net.ipv4.tcp_max_tw_buckets TIME_WAIT 总量

TIME_WAIT 状态套接字的总量上限，超出后内核会立即销毁并打印告警；默认 262144，属于保护性参数。

net.ipv4.tcp_slow_start_after_idle 空闲后慢启动

默认开启（1）：连接空闲超过 RTO 后拥塞窗口重置并重新慢启动，长肥管道上的长连接会因此吞吐骤降。

nf_conntrack_tcp_timeout_established 跟踪超时

连接跟踪中 ESTABLISHED 表项的默认存活时间为 432000 秒（5 天），长连接多的网关会长期占用表容量。

fs.nr_open 单进程句柄硬上限

单个进程能打开的文件描述符硬上限（默认 1048576）；limits 中的 nofile 不能超过它。

net.ipv4.tcp_window_scaling 窗口缩放

允许窗口大于 64KiB 的 TCP 选项（缩放因子最高 2 的 14 次方）；高延迟链路的吞吐高度依赖它，关闭等于给窗口设上限。

fs.aio-max-nr 异步 IO 事件上限

系统级 Linux 原生 AIO 事件数量上限（默认 65536）；数据库等使用异步 IO 的负载可能先行触顶。

net.ipv4.tcp_mem 全局 TCP 内存水位

三个页面数表示 TCP 全局内存的低水位/压力水位/上限；内核按物理内存自动计算初值，超压时限制新缓冲分配。

net.ipv4.tcp_timestamps 时间戳选项

启用 TCP 时间戳用于更精细的 RTT 测量与 PAWS 防旧报文重放；tcp_tw_reuse 的复用判定也依赖它。

net.ipv4.icmp_echo_ignore_all 禁 Ping

置 1 后本机不再响应 ICMP Echo 请求；常用于降低被扫描面，但会给外部连通性排查带来误导。

kernel.pid_max PID 编号空间

系统 PID（含线程号）编号上限：内核默认 32768，允许范围到 4194304；高密度容器/线程场景需要评估。

net.ipv4.tcp_abort_on_overflow 队列溢出行为

accept 全连接队列溢出时的两种处理：默认丢弃握手（等对端重传），或回 RST 让对端立即失败。

vm.overcommit_ratio 超售比例

严格超售模式下 CommitLimit 的构成比例（默认 50）：CommitLimit = swap + 物理内存 × ratio%；仅在 overcommit_memory=2 时生效。

kernel.core_pattern 核心转储路径

定义崩溃核心文件的命名（内核默认 core，现代发行版多改为管道交给 systemd-coredump 统一管理）。

vm.vfs_cache_pressure 目录缓存回收倾向

控制内核回收 dentry/inode 缓存的倾向（默认 100）：大于 100 回收更积极，小于 100 更倾向保留。

kernel.sysrq 系统请求键掩码

SysRq 功能位掩码（0 全关、1 全开、438 为常见组合）；卡死救援时可通过 /proc/sysrq-trigger 触发保存、导出栈等操作。

vm.min_free_kbytes 保留空闲内存

内核启动时按内存规模计算并保留的空闲内存水位（低水位线）；数值过低会引发直接回收与分配失败，过高则浪费内存。

vm.dirty_expire_centisecs 脏页老化时间

脏页超过该时间（默认 3000，即 30 秒）会被后台回写线程处理；控制数据在内存中滞留的上限时长。

kernel.panic 崩溃自动重启

panic 后等待多少秒自动重启（0 为不重启）；与 panic_on_oops、hung_task_panic 组合构成无人值守的自愈链路。

net.ipv4.neigh.default.gc_thresh ARP 表阈值

邻居表回收的三个阈值（默认 128/512/1024）；同网段大量主机时表满会打印 neighbor table overflow 并影响通信。

vm.dirty_writeback_centisecs 回写周期

内核回写线程的唤醒周期（默认 500，即 5 秒），决定脏页被检查与写出的节奏。

kernel.threads-max 系统任务数上限

整个系统的任务（线程）数量上限，内核按内存规模自动计算；触顶时新建线程失败。

vm.zone_reclaim_mode NUMA 本地回收

控制内存节点耗尽时是否优先在本地节点回收（而非跨节点分配）：0 关闭为默认；开启后可能降低远程访问但增加回收开销。

kernel.sem SysV 信号量四元组

四个数值分别限制：每组信号量数、系统信号量总数、单次操作数、信号量组数（发行版常见 250 32000 32 128）。

kernel.printk 控制台日志级别

四元组控制日志输出行为：控制台级别、默认消息级别、控制台最低级别、启动默认级别（常见值 4 4 1 7）；级别数值越小消息越重要。

tcp_available_congestion_control 算法清单

内核当前支持的拥塞控制算法（available）与允许应用切换的算法（allowed）；切 bbr 前先在清单中确认。

fs.inotify.max_user_instances 实例配额

每个用户可创建的 inotify 实例数上限（默认 128）；每个实例内部再受 watches 配额约束，二者需成对调整。

kernel.hung_task_timeout_secs 任务挂起告警

处于 D（不可中断睡眠）状态超过阈值的任务会被记录告警（默认 120 秒）；可配置直接 panic 作为自愈手段。

kernel.dmesg_restrict 与 kptr_restrict 信息暴露控制

限制非特权用户读取内核日志（dmesg_restrict）与打印内核指针（kptr_restrict）；安全加固常用组合。

net.ipv4.tcp_ecn 显式拥塞通知

ECN 协商：0 关闭、1 主动启用、2 仅在对端请求时启用（现代默认）；用标记代替丢包传递拥塞信号。

vm.page-cluster swap 预读页数

swap 预读的页数按 2 的 n 次方计（默认 3 → 8 页 ≈ 32KiB）；顺序换页时提升效率，随机负载下可能放大读开销。

kernel.shmmax SysV 共享内存上限

shmmax 限制单个共享内存段字节数、shmall 限制系统共享内存总页数、shmmni 限制段数量；数据库部署常需核对。

net.ipv4.udp_mem 等 UDP 缓冲参数

UDP 全局内存水位（udp_mem，按页）与单套接字最小缓冲（udp_rmem_min/udp_wmem_min，默认各 4096）；UDP 无流控，缓冲不足直接丢包。

kernel.msgmax 消息队列单条上限

SysV 消息队列单条消息大小上限（常见 8192 字节）；同类参数 msgmnb 限制单队列总字节、msgmni 限制队列数量。

net.core.rmem_default / wmem_default 默认缓冲

每个新套接字的默认收发缓冲（各 212992 字节）；未显式 setsockopt 的应用直接继承，TCP 自动调优在此基础上工作。

kernel.randomize_va_space 地址随机化

ASLR 级别：0 关闭、1 部分随机化、2 完全随机化（默认）；属于安全基线参数。

net.ipv4.tcp_autocorking 小包合并

内核在发送路径尝试合并小数据（队列中已有未发送数据时避免立即发出），默认开启；减少包数但可能略增延迟。

kernel.nmi_watchdog NMI 看门狗

基于性能计数器的硬锁检测与采样来源（常见默认开启，虚拟机多为关闭）；关闭可省少量开销但失去 hard lockup 检测。

kernel.unprivileged_bpf_disabled 非特权 BPF

控制非特权用户能否加载 BPF 程序：0 允许、1 禁止、2 禁止且不可回退（现代发行版常见 2）；root 不受影响。

net.core.busy_read / busy_poll 低延迟轮询

允许应用通过 SO_BUSY_POLL 在网卡队列上自旋轮询收包（默认关闭）；以 CPU 换微秒级延迟收益。

net.core.optmem_max 辅助缓冲区上限

单个套接字辅助数据（cmsg 等控制信息）缓冲上限；带辅助信息的通信（特定隧道/组播场景）可能受其约束。

vm.stat_interval 统计刷新间隔

内核更新虚拟机统计信息的间隔（默认 1 秒）；/proc/vmstat 等视图按该节奏刷新，影响监控读数的时效性。

CPU 与调度

负载分析、上下文切换与绑核策略

load average 负载均值解读

1/5/15 分钟负载指数平均：统计运行队列与不可中断（D 状态）任务；必须与 CPU 核数比较才有意义。

top 中 CPU 各项含义

CPU 行的 %us/%sy/%wa/%hi/%si/%st 等字段：分别对应用户态、内核态、I/O 等待、硬中断、软中断与虚拟化窃取。

lscpu 查看 CPU 拓扑

输出 CPU 架构、插槽/核/超线程数、频率、缓存与 NUMA 信息；核对物理核与逻辑核的基础命令。

vmstat：cs 列与 r/b 队列

vmstat 输出中 r（运行队列）、b（不可中断任务）、in（中断）、cs（切换）四列联读，快速判断调度压力类型。

CFS 调度器与 vruntime

完全公平调度（CFS）以 vruntime 排序选择任务：权重（由 nice 映射）影响 vruntime 增速，从而决定 CPU 分配比例。

上下文切换开销与观测

任务切换需要保存/恢复寄存器与栈并损失缓存局部性；切换量远超业务规模时通常是锁竞争或调度异常的信号。

nproc 可用处理单元数

返回进程当前可用的处理单元数量（受亲和性与 cgroup 配额影响），是设置并发 worker 数的常用基准。

pidstat -w 进程级切换分析

按进程/线程统计自愿（cswch）与非自愿（nvcswch）上下文切换，是定位「谁在疯狂切换」的直接工具。

/proc/stat 累计计数解读

内核累计统计：每核 cpuN 行的 user/nice/system/idle/iowait/irq/softirq/steal，以及 ctxt、processes 等汇总计数。

sched_rt_runtime_us 实时带宽限制

SCHED_FIFO/SCHED_RR 任务在每个 sched_rt_period_us（默认 1s）内最多可占用的 CPU 时间（默认 950000us，即 95%），防止实时任务饿死普通任务。

/proc/loadavg 字段速读

实时负载视图：三个均值 + 当前运行任务/总任务数 + 最近创建进程 PID，排查时可即时判断忙闲。

sched_min_granularity_ns 最小调度粒度

CFS 下单个任务被抢占前的最短运行时间（默认 3ms 量级），限制时间片下限，避免频繁唤醒场景的切换开销失控。

sched_latency_ns 调度周期

CFS 的目标调度周期（默认 24ms 量级）：周期内每个可运行任务至少获得一次调度；任务数决定实际时间片。

EEVDF 调度器（6.6 起）

内核 6.6 起默认调度器演进为 EEVDF（最早合格虚拟截止时间），改善延迟敏感任务的选择；调参项迁移到 sched_base_slice 等。

sched_wakeup_granularity_ns 唤醒抢占粒度

唤醒的普通任务抢占当前任务所需的最小虚拟时间差（默认 1ms 量级）；调小让唤醒任务更快上台，调大减少抢占抖动。

cgroup v2 cpu.max CPU 限额

cpu.max 形如 "50000 100000"：每 100ms 周期最多使用 50ms CPU（约 0.5 核）；是容器与 systemd 服务限核的现行接口。

隔离核：isolcpus / nohz_full / rcu_nocbs

组合内核参数把指定核从常规调度均衡、时钟滴答与 RCU 回调中隔离，供延迟敏感任务独占，需配合显式绑核使用。

sched_migration_cost_ns 迁移代价窗口

任务刚被迁移后的缓存热窗口（默认 0.5ms 量级）：窗口内调度器倾向不再迁移该任务，减少跨核缓存失效。

chrt 设置调度策略与优先级

查看或设置进程调度策略：FIFO(-f)/RR(-r)/BATCH(-b)/IDLE(-i)/OTHER(-o)；-p 改运行中进程，直接带命令则启动新进程。

cgroup v2 cpu.weight 相对权重

cpu.weight 是 CPU 时间的相对份额（默认 100，范围 1-10000）；仅在多组竞争 CPU 时按权重分配，空闲时不设上限。

cgroup v2 cpuset 核心与节点绑定

cpuset.cpus 与 cpuset.mems 把一组任务限定在指定 CPU 与 NUMA 节点上运行，属于硬性隔离，常用于核心独占。

cpufreq 调频调速器

governor 决定 CPU 频率如何随负载变化：performance 恒高频、powersave 最低频、schedutil 由调度器驱动；低延迟场景常固定 performance。

CPU 使用率高排查流程

按层级排查：系统整体 → 具体进程 → 具体线程 → 函数级热点 → 归因（计算/系统调用/锁/GC），每步都有对应工具。

sched_nr_migrate 批量迁移任务数

单次负载均衡操作中最多尝试迁移的任务数（默认 32）；大量短命任务场景影响均衡效率与单次暂停时长。

nice / renice 调整普通优先级

nice 值 -20..19（越小优先级越高）；普通用户只能调大 nice，调小需要 CAP_SYS_NICE；renice 立即生效但不持久。

taskset 绑定 CPU 亲和性

用掩码或 -c 列表把进程限制在指定 CPU 上运行，减少跨核迁移与缓存失效；systemd 服务可用 CPUAffinity 持久化。

平均负载高但 CPU 空闲的排查

Linux 的平均负载把不可中断睡眠（D 状态，多为等 IO）计入；负载高而 CPU 空闲通常是磁盘或网络文件系统阻塞。

systemd 单元 CPU 资源控制

systemd 通过 CPUQuota/CPUWeight/AllowedCPUs/TasksMax 等指令在单元级限制资源；set-property 即时生效并生成 drop-in 持久化。

温度与降频排查

CPU 因温度或功耗墙降频时表现为性能下滑、频率低于标称；从 thermal zone、dmesg 与 /proc/cpuinfo 三处交叉验证。

软中断与 ksoftirqd 排查

网络与块设备的收尾工作在软中断中完成；压力高时 ksoftirqd 线程接手处理，单核 si 高往往对应中断集中或包处理风暴。

numa_balancing 自动 NUMA 均衡

内核自动把任务与内存页向访存更近的节点迁移；开启可改善通用负载的跨节点访问，确定性的内存密集负载常关闭改为手工绑定。

numactl 绑定核与内存节点

numactl --physcpubind 限定逻辑核、--membind/--preferred 控制内存节点；--localalloc 让分配尽量就近，降低跨节点延迟。

PREEMPT_DYNAMIC 抢占模型

PREEMPT_DYNAMIC 允许同一内核在启动时或运行时切换抢占模型（voluntary/full 等），在吞吐与内核态延迟间取舍。

soft lockup 排查

某 CPU 长时间不让出调度时内核报 soft lockup（dmesg 可见 BUG: soft lockup），常见于驱动或内核路径长时间占用/关抢占。

tuna 查看与调整线程/中断亲和

tuna 可列出线程与 IRQ 的当前 CPU 亲和性并批量移动，常用于把中断与工作线程固定到指定核心，减少干扰。

vmstat 的 r 列：运行队列长度

r 列是等待运行的进程数（含正在运行）；持续大于逻辑核数说明 CPU 侧排队，需要结合 cs/in 列区分缺 CPU、锁竞争还是中断风暴。

cgroup v2 cpu.stat 节流诊断

cpu.stat 提供 usage_usec、nr_periods、nr_throttled、throttled_usec 等计数；nr_throttled 增长说明任务反复撞上 cpu.max 限额。

cgroup v2 pids.max 进程数限制

pids.max 限制 cgroup 内可创建的进程与线程总数，防 fork 炸弹；触顶后 fork/clone 返回 EAGAIN。

intel_pstate 驱动与 EPP

Intel 平台默认使用 intel_pstate（active 模式），governor 退化为 performance/powersave 两档，功耗与延迟平衡由 EPP 偏好控制。

turbostat 频率与 C-state 观测

turbostat 直接读取 MSR 输出每核实际频率、C-state 驻留与功耗估算，是验证调频/降频是否生效的量化工具。

用户态与内核态占比判读

us/sy 比例定位 CPU 消耗归属：用户态高是应用计算，内核态高指向系统调用、锁竞争、页错误或网络栈处理。

kworker 高占用排查

kworker 线程执行内核延迟工作（IO 完成、驱动任务等）；持续高占用通常意味着存储/网络路径上有持续负载或驱动问题。

irqbalance 中断均衡服务

irqbalance 自动把硬件中断分散到各核心，减少单核软中断热点；与手动 IRQ 亲和性设置冲突时需二选一。

中断亲和性手动绑定

把网卡/块设备中断固定到指定核，降低单核 softirq 热点；/proc/interrupts 看计数分布，smp_affinity_list 写核列表。

threadirqs 中断线程化

内核参数 threadirqs 让大部分中断处理程序以内核线程运行，可对其设置调度策略与亲和性，便于控制中断抖动。

PSI CPU 压力指标

Pressure Stall Information（内核 4.20+）在 /proc/pressure 下量化任务因等 CPU/IO/内存而停顿的比例，avg10/60/300 便于看趋势。

sched_debug 调度器视图

/proc/sched_debug 展示每 CPU 运行队列、当前任务、负载与调度域，用于确认绑核、隔离与负载分布是否按预期生效。

sched/features 调度特性开关

部分调度特性通过 debugfs 的 /sys/kernel/debug/sched/features 暴露，可临时开关用于定位回归；属于调试接口非稳定 ABI。

cpuidle 空闲状态管理

空闲时 CPU 进入的 C-state 深度由 governor 与延迟容忍决定；深睡省电但唤醒慢，延迟敏感场景可用 latency 限制或调换 governor。

steal time 判读（虚拟化）

虚拟机 CPU 时间被宿主或其他租户抢占的部分记为 steal；持续偏高说明资源超卖或邻居争抢，虚机内部优化无法根治。

cyclictest 实时延迟测量

cyclictest 以高精度定时器循环唤醒并测量实际延迟，输出 Min/Avg/Max，是评估系统调度抖动的常用量化手段。

实时优先级权限（rtprio 限制）

普通用户设置实时策略需要 rtprio 资源限制（ulimit -r）；权限不足时 sched_setscheduler 返回 EPERM，systemd 服务用 LimitRTPRIO 放行。

sched_rr_timeslice_ms 轮转时间片

SCHED_RR 每个时间片的长度（默认 100ms）；FIFO 不轮转，RR 在片用完或更高优先级任务到来时让出。

线程级排查：ps -eLf / top -H

按线程维度观察 CPU 占用：ps 用 LWP 列、top -H 显示线程；定位热点线程后再用 perf 等工具深挖。

pidstat -t 线程级统计

sysstat 的 pidstat 可按线程输出 CPU 与上下文切换数据，适合定位多线程服务中的热点线程与切换大户。

cpupower 频率与 C-state 管理

cpupower 提供频率策略设置（frequency-set）、信息查询（frequency-info）、空闲状态统计与监视（idle-info / monitor）等能力。

mpstat 每核利用率与中断分布

sysstat 的 mpstat -P ALL 展示每逻辑核的 usr/sys/iowait/soft/steal；-I 汇总中断统计，用于发现单核热点与中断集中。

调度调参方法论

调度类调参流程：先录制参数基线，再明确目标指标（延迟/吞吐），一次只改一项，用压测对比，未达标即回退。

schedstat 调度统计

开启 CONFIG_SCHEDSTATS 后可读 /proc/schedstat 与 /proc/<pid>/schedstat，观察运行时长、排队等待与迁移计数，验证调度行为。

CPU 逻辑核上下线

通过 /sys/devices/system/cpu/cpuN/online 动态启用/关闭逻辑核，用于故障隔离、维护或演练；下线前任务会被迁走。

内存与 OOM

内存分布、缓存回收与 OOM 排查

vm.overcommit_kbytes 固定提交上限

overcommit_memory=2 时可改用固定字节数作为提交上限（非 0 时优先于 overcommit_ratio），适合需要精确控制可提交内存的机器。

vm.watermark_scale_factor 回收水位间距

决定 kswapd 提前回收的积极程度：各 zone 的 low 与 high 水位间距按内存规模乘以该系数（默认 10 即 0.1%），调大让回收更超前。

vm.compaction_proactiveness 主动碎片整理

内核主动做内存碎片整理的积极度（0-100，5.18 起默认 20）；也可向 /proc/sys/vm/compact_memory 写值手动触发一次全局整理。

Transparent HugePage 全局开关

/sys/kernel/mm/transparent_hugepage/enabled 控制 THP：always 全局启用、madvise 仅对声明区间启用、never 关闭；数据库类负载常选 madvise/never。

cgroup v2 memory.max 硬上限

内存硬限额：用量触顶时先在组内回收，无法满足则触发 cgroup 级 OOM；是容器与关键服务内存隔离的主力接口。

cgroup v2 memory.min/low 保底

memory.min 为硬保底：内存短缺时该组内存不会被回收；memory.low 为软保底：仅在别无选择时才回收。用于保护关键服务的最小工作集。

set_mempolicy 与 mbind 应用级 NUMA 策略

应用可通过系统调用设置 NUMA 内存策略：MPOL_DEFAULT 默认、MPOL_BIND 绑定节点、MPOL_PREFERRED 优先、MPOL_INTERLEAVE 交错分布。

内存分配失败的分层排查

ENOMEM/EAGAIN 报错按层排查：进程地址空间限制（ulimit -v）→ cgroup 限额 → overcommit 模式 → max_map_count → 碎片/大页。

/proc/buddyinfo 碎片观测

按内存区和阶数展示空闲块数量；高阶块（order 5 以上）长期为 0 说明碎片化严重，大页与高阶分配会很吃力。

THP defrag 碎片整理策略

defrag 决定为凑 2MiB 大页是否同步整理内存：always/defer/madvise/never；always 可能造成明显延迟尖峰，defer 后台异步处理。

静态大页（HugePages）配置

通过 vm.nr_hugepages 预留固定数量的大页供应用显式使用（MAP_HUGETLB / SHM_HUGETLB），避免运行时分配 2MiB 连续内存的碎片问题。

MADV_HUGEPAGE 按需启用大页

应用对特定内存区间声明 MADV_HUGEPAGE 启用、MADV_NOHUGEPAGE 关闭 THP，在全局 always 之外获得按需控制能力。

oom_score_adj 调整 OOM 倾向

在 -1000..1000 范围调整进程被杀倾向：负值降低（保护），正值提高（可牺牲）；systemd 服务可用 OOMScoreAdjust 固化。

dmesg OOM 日志解读

OOM 触发时 dmesg 会打印节点/memcg 内存概况、进程 rss 与 oom_score，最后才是 Killed process 结论行。

cgroup v2 memory.high 软限额

软限制：超过后抑制分配、强制回收，进程变慢但不直接被杀；适合“先刹车”再观察的过渡手段。

cgroup v2 memory.stat 构成分析

memory.stat 拆分内存构成：anon、file、slab、shmem 及 pgscan/pgsteal、pgmajfault 等，用于区分泄漏（anon 涨）与缓存（file 涨）。

/proc/meminfo 关键字段解读

关注 MemTotal/MemFree/MemAvailable/Buffers/Cached/Slab(SReclaimable/SUnreclaim)/Committed_AS/CommitLimit 的组合，而不是单看 MemFree。

创建并启用 swap 文件

在磁盘上创建 swap 文件并启用：fallocate 建文件（或 dd 兜底）→ chmod 600 → mkswap → swapon，写入 fstab 持久化。

zram 压缩内存交换

把一部分内存做成压缩块设备当 swap 使用：换出页压缩存放，减少真实磁盘 IO，用 CPU 换内存，适合内存紧张而 CPU 富余的场景。

kswapd 回收线程排查

kswapd0 负责后台回收；持续高 CPU 说明内存压力大或水位配置导致长期回收，应结合回收计数与 PSI 判断而非直接调参。

直接回收（allocstall）诊断

分配内存失败时内核在分配路径上同步回收，造成延迟尖峰；allocstall 计数增长即表示发生过直接回收。

slab 增长与内核泄漏排查

定位内核对象泄漏：slabtop 找持续增长缓存 → 读 /sys/kernel/slab/<cache>/ 的 objects → 必要时启用 kmemleak 扫描。

应用内存泄漏定位（smaps 差分）

对进程做 smaps_rollup 定期采样做差：anon/private 持续增长指向应用分配泄漏，file 增长多为缓存；再用 pmap 找具体增长段。

MADV_DONTNEED / MADV_FREE 主动释放

应用用 madvise 主动释放区间页：DONTNEED 立即丢弃（文件页可重读、匿名页数据丢失），FREE 延迟回收但在内存紧张前保留数据。

glibc 内存归还（arena 与 malloc_trim）

多线程 glibc 应用 RSS 偏高常与 per-thread arena 有关：可用 MALLOC_ARENA_MAX 限制 arena 数量，或调用 malloc_trim(0) 主动归还空闲堆。

vm.watermark_boost_factor 瞬时抬升水位

按比例临时抬高低水位，缓解碎片化时的分配失败；属于瞬态缓冲，不是长期给系统多留内存的手段。

vm.extfrag_threshold 碎片判定阈值

高阶分配失败时用于判断该优先碎片整理还是直接回收的阈值（默认 500）；判定依赖内核的碎片指数，一般无需调整。

/proc/zoneinfo 水位与页状态

逐 zone 展示 min/low/high 水位、free 页与活跃/非活跃页统计，用于判断水线是否健康、是否长期贴着低水位运行。

khugepaged 合并线程观测

khugepaged 后台把连续 4KiB 页合并为 2MiB 大页；pages_collapsed 持续增长说明合并活跃，合并过程可能影响相关进程的延迟。

cgroup v2 memory.swap.max 限制

限制该组可使用 swap 的上限；设为 0 表示该组不使用 swap，让内存压力以更早的 OOM 暴露而非长期抖动。

cgroup v2 memory.oom.group 整组终止

设为 1 时该 cgroup 发生 OOM 会整组一起被终止，避免组内部分进程死亡留下的不一致状态，适合不可分割的工作负载。

cgroup v2 memory.events 事件计数

记录 low/high/max/oom/oom_kill 等事件累计次数；max 与 oom_kill 增长说明限额曾被打穿，high 增长说明发生过节流。

cgroup v2 memory.current 与 peak

memory.current 是当前用量（含缓存），memory.peak（5.19+）记录峰值；用峰值判断与限额的安全距离比瞬时值可靠。

内存压力 PSI（/proc/pressure/memory）

量化因内存不足导致的停顿：some 表示至少一个任务受影响，full 表示所有任务都被回收阻断；avg300 适合看长期趋势。

/proc/vmstat 内存计数速查

pgpgin/pgpgout、pswpin/pswpout、pgmajfault、pgscan_direct、allocstall、oom_kill 等累计计数是做趋势与告警的原始数据。

缺页统计（minor / major fault）

次缺页（minor）在内存中解决页表映射，主缺页（major）需要磁盘 IO；major fault 速率直接影响应用延迟。

swapoff 的风险与步骤

关闭 swap 会把已换出的页全部读回物理内存；若余量不足将触发 OOM，操作前必须核对 MemAvailable 与 Committed_AS。

zswap 前端压缩缓存

换出页先进入压缩内存池，命中则免去磁盘写；池满后按策略回写后端 swap，属于“前置换出缓存”机制。

回收效率指标 pgscan/pgsteal

pgscan 是扫描页数、pgsteal 是成功回收页数；两者比值反映回收效率，效率低说明扫描的多是不可回收或高频访问页。

手动清理页面缓存

向 /proc/sys/vm/drop_caches 写 1（页缓存）/2（dentry、inode）/3（两者）触发清理；用于测试或演示，生产需评估副作用。

smaps_rollup 进程内存汇总

/proc/<pid>/smaps_rollup 汇总 Rss/Pss/Shared/Private 等字段，读取开销远小于全量 smaps，适合定期采样做差定位增长。

numastat 跨节点访问统计

按节点统计 numa_hit/miss/foreign 等命中情况；foreign 与 miss 持续偏高说明跨节点访问多，是 NUMA 调优的信号。

tmpfs 占用内存排查

tmpfs 上的文件直接消耗内存并计入 Shmem；df 看用量、du 找文件、/proc/meminfo 的 Shmem 看总量，容器 /dev/shm 与 /tmp 是高发区。

/dev/shm 与共享内存限制

/dev/shm 是 tmpfs 挂载点，进程间共享内存常放这里；默认尺寸与容器参数相关，共享段用 ipcs 查看。

mlock 锁定内存

mlock/mlockall 把页面锁定在内存中避免换出，用于低延迟场景；受 RLIMIT_MEMLOCK 限制，服务可配 LimitMEMLOCK。

kdump 崩溃转储配置检查

内核崩溃时由 kdump 捕获 vmcore 供 crash 分析；需要预留 crashkernel 内存并启用相应服务，确认转储目标空间充足。

KSM 同页合并

Kernel Samepage Merging 扫描并合并内容相同的页，节省内存（虚拟化场景常见），代价是 CPU 扫描开销。

大页使用量核对

/proc/meminfo 的 HugePages_Total/Free/Rsvd/Surp 显示预留与使用情况；Surp 为超额分配预留计数，长期大量 Free 表示预留浪费。

oom_kill 计数与内存告警

/proc/vmstat 的 oom_kill 计数累计系统内 OOM 次数；做增量监控可在业务无感知前发现内存问题。

MemAvailable 与 free 的差异

MemAvailable 是内核基于可回收缓存与 slab 估算的可用量（free 的 available 列），比 MemFree 更能代表还能分配多少；完整空闲只是 MemFree。

swap 换入换出判读（si/so）

vmstat 的 si/so 是换入换出速率；持续非零说明内存紧张，伴随延迟升高时要考虑扩容或调整内存策略，而非只调 swappiness。

swap 设备优先级

多块 swap 用 pri 决定使用顺序：数值大的优先使用；swapon --priority 立即生效，fstab 里写 pri= 持久化。

slabtop 内核缓存观测

按占用排序展示 slab 对象缓存（dentry、inode 等），是定位内核态内存增长来源的第一站。

ps 内存列含义：VSZ 与 RSS

VSZ 是虚拟地址空间大小（可能大部分未使用），RSS 是常驻物理页（包含共享页）；多进程相加大于物理内存属于共享重复计数。

pmap 进程映射明细

逐段列出进程地址空间的映射与 RSS/Dirty，定位大块匿名映射、文件映射或异常增长段。

smem 的 PSS 报表

smem 以 USS/PSS/RSS 三个口径输出进程与用户内存报表，PSS 按共享比例分摊，适合多进程共享库场景的真实占用评估。

Buffers 与 Cached 的区别

Buffers 是块设备元数据缓存，Cached 是文件内容与 tmpfs 的缓存；free 的 buff/cache 为两者合计，大部分可回收、tmpfs 部分不可。

vmtouch 页面缓存探查与预热

vmtouch 可查看文件/目录在页缓存中的覆盖率，也可预热（-t）或驱逐（-e）缓存，用于验证缓存命中和控制内存占用。

磁盘与 IO

IO 调度器、文件系统与磁盘瓶颈

网络栈调优

队列、拥塞控制与连接数优化

性能分析工具

perf、sar、iostat 与火焰图思路

‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌‌