查看降频原因
查看降频原因
nvidia-smi -q -d PERFORMANCE | grep -A 20 "Clocks Throttle Reasons"关联查看
关联查看
nvidia-smi --query-gpu=clocks.sm,power.draw,temperature.gpu,power.limit --format=csv触发降频时吞吐下降但不会报错,属于「安静的性能问题」,监控要把它纳入告警。
推理速度突然下降先看降频:-q -d PERFORMANCE 列出 Clocks Throttle Reasons,常见为 SW Power Cap(功耗墙)与 HW Thermal(温度),个别还有 SW Thermal Slowdown。
nvidia-smi -q -d PERFORMANCE | grep -A 20 "Clocks Throttle Reasons"nvidia-smi --query-gpu=clocks.sm,power.draw,temperature.gpu,power.limit --format=csv