首页/AI/大模型部署与运维速查/日志采集:三类分开
运维监控与排障50 条

日志采集:三类分开

三类日志分开收:引擎应用日志、网关访问日志、系统内核/驱动日志(dmesg/journal);统一打标(实例、版本、时间)集中检索,保留周期按磁盘与合规要求定。

系统侧常用命令

系统侧常用命令
journalctl -u <服务名> -n 100 --no-pager
dmesg -T | tail -50
内核日志里的 NVRM/Xid 行是 GPU 故障的关键证据:采集管道别把它过滤掉。

易错点

  • 只收应用日志:掉卡与驱动的证据在内核日志,事后无法补采

数据来源与参考

  • systemd journalctl 手册(freedesktop.org)
  • NVIDIA Xid 文档(docs.nvidia.com/deploy/xid-errors)
​‌‌​​‌​​​‌‌​‌‌‌‌​‌‌​​​‌‌​‌‌‌​​‌‌​​‌​‌‌‌​​‌‌‌​​​‌​‌‌​‌​​‌​‌‌‌​​​‌​‌‌​‌​​‌​‌‌​​​‌‌​‌‌‌​‌​​​‌‌​‌‌‌‌​​‌​‌‌‌​​‌‌​​​‌‌​‌‌​‌‌‌‌​‌‌​‌‌​‌