治理清单行示例
治理清单行示例
条目：LLM01 提示注入
现状：已做隔离与白名单；多模态通道检测待补
负责：平台安全组
验证：注入回归集通过率 xx%；下次评审 2026-11-01
证据链接：评测报告与配置变更记录| 用法 | 框架用于查漏与沟通，不替代内部红队与实测 |
|---|---|
| 状态 | 每条给状态与证据，避免清单形式化 |
| 评审 | 季度评审一次，随系统能力变化调整适用性 |
本包目录（290 条）
提示词基础40 条模式与框架50 条任务型写法50 条评估与迭代50 条
提示注入与防护50 条
- 提示注入的基本概念
- 间接注入：第三方内容夹带指令
- 指令与内容的隔离写法
- 注入与越狱的区别
- 直接注入：用户输入携带指令
- 指令层级：系统高于用户高于内容
- 最小权限原则
- RAG 文档投毒与注入面
- Markdown 图片链接的数据外泄原理
- 提示加固条款写法
- 工具返回内容里的注入
- 分隔符防护的局限
- 输出侧的检查与拦截
- 工具白名单与参数校验
- 沙箱与执行隔离
- 纵深防御的组合设计
- 多模态载体上的注入
- 来源标记（Spotlighting）
- 输入侧的指令样式检测
- 敏感操作的人工审批
- 出站流量与数据外发控制
- 注入防护测试集设计
- 隐藏文本与不可见字符
- 双模型模式：特权模型与受限模型
- canary 标记检测泄露
- 系统提示的保密与泄露应对
- 防护效果的评估指标
- 编码混淆与清洗归一化
- 会话隔离与数据边界
- 安全规则与业务提示分层
- 红队评估的组织流程（防御视角）
- 注入尝试的日志与监控
- 注入事件的响应流程
- 内容来源可信度分层
- 数据标记（datamarking）
- 可疑请求的拒答与降级话术
- 高风险动作的确认设计
- 防护与效用的平衡
- 告警分级与响应
- 对照 OWASP 与 NIST 建立治理清单
- 插件与连接器的供应链风险
- 注入防护与内容审核的区别
- 注入事件复盘与修复闭环
- 防御规则的维护与版本化
- 系统提示泄露的检测思路
- 多代理协作中的注入传播
- 模型与依赖更新后的防护复测
- 内部人员与权限风险
- 输出溯源与水印标记
- 防护开销与性能评估
对照 OWASP 与 NIST 建立治理清单
用公开框架查漏：OWASP LLM Top 10 与 NIST AI 100-2 分类逐条对照，标注适用性与现状，形成可维护的治理清单。
易错点
- 清单不落证据与责任人时会变成一次性文档，没人维护
- 把框架条目直接当验收标准会忽略自身业务风险差异
数据来源与参考
- OWASP Top 10 for LLM Applications（2025）；NIST AI 100-2（2024）对抗机器学习分类