首页/AI/提示词工程速查/抽取任务的字段级评估
评估与迭代50 条

抽取任务的字段级评估

抽取评估按字段算:完全匹配、归一化后匹配、部分匹配三档分开统计;整体通过率之外要报每字段指标。

提示词工程速查AI更新于 2026-10-12

字段级评估口径

字段级评估口径
完全匹配:字符串逐字相同
归一化匹配:去空格/大小写/全半角后相同
部分匹配:编辑距离 <= 1 或数值误差 <= 0.5%
报告:每字段三档命中率 + 缺失率 + 幻觉率(原文没有却抽出)
分档业务对归一化后相同的接受度不同,分档报告便于讨论
幻觉抽出原文不存在的内容要单独统计,属严重错误
分母可空字段的有效样本数与必填字段不同,报告注明

易错点

  • 所有字段混算一个准确率会掩盖关键字段退化;关键字段单独列
  • 可空字段把“正确抽空”算成命中会虚高;分母口径写清

数据来源与参考

  • 信息抽取评测惯例(字段级 precision/recall 与归一化匹配)
​‌‌​​‌​​​‌‌​‌‌‌‌​‌‌​​​‌‌​‌‌‌​​‌‌​​‌​‌‌‌​​‌‌‌​​​‌​‌‌​‌​​‌​‌‌‌​​​‌​‌‌​‌​​‌​‌‌​​​‌‌​‌‌‌​‌​​​‌‌​‌‌‌‌​​‌​‌‌‌​​‌‌​​​‌‌​‌‌​‌‌‌‌​‌‌​‌‌​‌