首页/AI/大模型部署与运维速查/磁盘写满:影响面与处置
运维监控与排障50 条

磁盘写满:影响面与处置

磁盘写满会连锁:日志写不进、缓存无法更新、容器与探针异常;先定位占用大头(模型、日志、镜像、缓存),按「可清 / 需扩容」分类处理,并补上水位告警。

定位

定位
df -h
du -xh --max-depth=1 / 2>/dev/null | sort -h | tail -15
journalctl --disk-usage
find /var/log -name '*.gz' -mtime +14 -size +100M 2>/dev/null | head
  • 常见大头:模型多版本、容器镜像层、未切割日志、下载缓存(~/.cache/huggingface)
  • 可清项:旧镜像(docker image prune)、旧日志归档、下载缓存
  • 防复发:磁盘水位告警从 80% 起,日志强制走 logrotate
清理权重与镜像前确认没有在途拉取与回退依赖;删除前先导出清单,动作不可逆。

易错点

  • 出事后才看磁盘:没有水位告警时,写满常在流量高峰同时爆发

数据来源与参考

  • Linux man 手册:df(1)/du(1)(man7.org)
  • Docker 官方文档:docker image prune
​‌‌​​‌​​​‌‌​‌‌‌‌​‌‌​​​‌‌​‌‌‌​​‌‌​​‌​‌‌‌​​‌‌‌​​​‌​‌‌​‌​​‌​‌‌‌​​​‌​‌‌​‌​​‌​‌‌​​​‌‌​‌‌‌​‌​​​‌‌​‌‌‌‌​​‌​‌‌‌​​‌‌​​​‌‌​‌‌​‌‌‌‌​‌‌​‌‌​‌