首页/AI/提示词工程速查/注入防护与内容审核的区别
提示注入与防护50 条

注入防护与内容审核的区别

内容审核管输出是否合规,注入防护管输入如何影响系统行为与副作用;两者目标、位置与指标不同,需要分别建设、分别度量。

提示词工程速查AI更新于 2026-10-12

两类机制的对比

维度内容审核注入防护
关注点输出内容的合规与安全类别内容对系统行为的操控及其副作用
位置以输入输出两端为主贯穿输入、工具调用、输出与出站
指标违规拦截率、误杀率注入拦截率、越权阻断率、任务完成率
失效后果违规内容外露系统执行非预期动作(发信、改数据)

协同关系梳理

协同关系梳理
内容审核:判说了什么   → 拦截违规文本
注入防护:判做了会怎样 → 约束工具与数据流
组合示例:审核通过的正常文案,也可能携带
          诱导下一步工具的指令,仍需注入检查

易错点

  • 接入内容审核接口后就认为注入风险已覆盖
  • 审核只看输出文本,忽略工具调用等副作用路径

数据来源与参考

  • OWASP Top 10 for LLM Applications(2025)LLM01 及输出处理条目;内容审核通用实践
​‌‌​​‌​​​‌‌​‌‌‌‌​‌‌​​​‌‌​‌‌‌​​‌‌​​‌​‌‌‌​​‌‌‌​​​‌​‌‌​‌​​‌​‌‌‌​​​‌​‌‌​‌​​‌​‌‌​​​‌‌​‌‌‌​‌​​​‌‌​‌‌‌‌​​‌​‌‌‌​​‌‌​​​‌‌​‌‌​‌‌‌‌​‌‌​‌‌​‌