两项一起跑
两项一起跑
from ragas.metrics import context_precision, context_recall
from ragas import evaluate
res = evaluate(dataset, metrics=[context_precision, context_recall])
print(res)指标对照
| 指标 | 回答的问题 |
|---|---|
| context_precision | 相关片段是否排在前位(受排序影响) |
| context_recall | 答案要点是否都出现在上下文中(受召回影响) |
context_recall 依赖 ground_truth:没有标准答案的场景可改用标注片段集合来近似。