| 双向 | 输入先审(拦截/转人工),输出再审(防生成违规) |
|---|---|
| 类别 | 暴恐、色情、仇恨、自伤、政治敏感等(各接口类目不同) |
| 策略 | 同步拦截高风险、低风险记分放行、审核接口故障时的降级预案 |
| 留痕 | 审核请求与结论入日志 |
送审调用(OpenAI Moderation 风格)
送审调用(OpenAI Moderation 风格)
curl https://api.openai.com/v1/moderations -H "Authorization: Bearer $KEY" -H "Content-Type: application/json" -d '{
"model": "omni-moderation-latest",
"input": "待审核的文本内容"
}'
# 返回 categories / category_scores,按业务阈值判定处置审核 API 故障要有明确降级策略:是“宁可放过”还是“宁可拦截”,按业务风险等级预先定好。