首页/AI/大模型部署与运维速查/推理服务常用默认端口速查
部署形态与选型43 条

推理服务常用默认端口速查

把常见推理组件与网关的默认监听端口汇总成表,用于防火墙规划、安全组核对与端口占用排查。

默认端口

组件端口
vLLM8000
TGI8080(容器内 80)
SGLang30000
Ollama11434
llama.cpp llama-server8080
LMDeploy api_server23333
Xinference9997
LiteLLM 网关4000
OpenWebUI3000
dcgm-exporter9400

确认端口占用

确认端口占用
ss -lntp | grep -E '8000|11434|30000'
lsof -i :8000
生产环境建议只暴露网关端口,推理引擎端口仅监听 127.0.0.1 或内网。

易错点

  • 默认端口是公开信息,直接暴露在公网会被扫描;改端口不等于安全,仍要加鉴权与来源限制

数据来源与参考

  • 各项目官方文档默认值(vLLM/TGI/SGLang/Ollama/LiteLLM/OpenWebUI)
​‌‌​​‌​​​‌‌​‌‌‌‌​‌‌​​​‌‌​‌‌‌​​‌‌​​‌​‌‌‌​​‌‌‌​​​‌​‌‌​‌​​‌​‌‌‌​​​‌​‌‌​‌​​‌​‌‌​​​‌‌​‌‌‌​‌​​​‌‌​‌‌‌‌​​‌​‌‌‌​​‌‌​​​‌‌​‌‌​‌‌‌‌​‌‌​‌‌​‌