维度 → 排查方向
维度 → 排查方向
上下文相关性低 → 召回/切分/embedding 问题
有据性低 → 生成约束/提示词/幻觉问题
答案相关性低 → 意图理解/改写/答非所问问题
三者皆低 → 先看数据与评测集是否本身有问题TruLens 把这套思路产品化为反馈函数;自建评估按这三类拆指标即可。
RAG Triad 是评估的骨架思路:上下文相关性(检索的片段与问题相关吗)、有据生成(答案被上下文支撑吗)、答案相关性(答案回应了问题吗);三者联合定位问题出在检索还是生成。
上下文相关性低 → 召回/切分/embedding 问题
有据性低 → 生成约束/提示词/幻觉问题
答案相关性低 → 意图理解/改写/答非所问问题
三者皆低 → 先看数据与评测集是否本身有问题