模型卡是什么
模型卡用固定结构说明一个模型的用途、训练数据概况、评测结果与已知局限：适用什么场景、明确不适用什么场景、在哪些题目上表现不佳、有哪些已知偏见与拒答倾向。它既是内部评审与交接的依据，也是对外披露、采购尽调和监管问询的标配材料。关键是要把它当成随版本更新的活文档，换底座、改系统提示、调整安全策略都构成一次版本变更。
基本信息
| 用途 | 说明适用场景与禁用场景，划清能力边界 |
|---|---|
| 数据概况 | 训练数据的来源类别、时间范围与已知缺口 |
| 评测结果 | 关键基准与业务评测结果，包含失败案例与短板 |
| 已知局限 | 偏见、幻觉倾向、拒答模式、对特定格式的不稳定表现 |
| 变更记录 | 版本号、日期、变更点与影响，历史版本可查 |
| 面向对象 | 内部评审、客户尽调、监管问询、供应商对比 |
典型使用场景
- 上线前评审：用用途与禁用场景确认产品边界与风险承担方式
- 客户与招标尽调：采购方需要知道模型能力边界与评测依据
- 监管问询：需要能说明训练数据概况、评测方式与安全措施
- 版本迭代交接：换底座或改提示词后，记录行为差异避免误判
- 多供应商对比：用同一套评测口径横向比较，避免只看宣传指标
模型卡骨架
模型卡骨架
## 模型卡：xxx（版本 2026-10）
- 用途：客服问答、文档摘要；禁用：医疗诊断、法律结论 # 禁用场景要写具体
- 数据：截至 2026-06 的公开语料加授权内部语料，不含用户对话数据
- 评测：内部评测集准确率 92%；已知短板：数字推理、超长表格
- 安全：红线类目拒答率 99% 以上；红队回归集覆盖情况 # 给出可核查的口径
- 局限：多轮长上下文中引用准确率下降；对方言口音识别不稳
- 变更：v2 更换底座模型，输出风格与拒答行为有明显差异
# 每项结论都要能对应到具体的评测集与日期，否则只是宣传语章节与常见问题
| 章节 | 应写内容 | 常见问题 |
|---|---|---|
| 用途与边界 | 适用场景与禁用场景 | 只写能力不写禁用项 |
| 数据概况 | 来源类别、时间范围、缺口 | 笼统写海量数据，无法核查 |
| 评测结果 | 基准与业务评测，含失败案例 | 只给一个总体分数 |
| 安全表现 | 红线拒答率与回归覆盖 | 没有测试口径与样本量 |
| 变更记录 | 版本、日期、变更点与影响 | 升级后模型卡不更新 |
模型卡要随变更更新：换底座、调系统提示、改安全策略都会改变输出行为，尽调与合规依赖的正是它的变更历史，而不是某一版的能力描述。
评测结论要标口径：样本量、评测集版本、评分方式与日期缺一不可，否则同一模型在不同时间的两份描述无法比较，也无法复现。