待验证50% 置信事实精确时间
在 RAG 评估中,'any expected document in top-k'(命中任意一份预期文档)和 'all required evidence in top-k'(包含全部所需证据)两种规则对多文档查询可能给出完全相反的结论,且两者不可互换。
1
来源数
50%
置信度
长期有效
时效性
2026/10/16
首次发现
来源
涉及实体
相关事实
待验证RAG的质量上限取决于检索阶段能否找到正确的段落,若检索到错误证据模型会给出合理但错误的答案69% 相似待验证与其争论哪个指标的平均分更高,不如输出受影响的查询清单,包括:哪些查询在两种规则下判定不同、每个查询的预期证据、实际检索位置、导致结论翻转的具体规则。68% 相似待验证在 RAG 场景下,如果索引中存在相互矛盾的信息,向量检索无法自动判断哪段内容更可信,会将两者都纳入生成上下文导致回答混乱66% 相似待验证在检索文档场景中不同答案会命中不同文档片段使证据可区分,但在代码评判中两份功能等价的代码抽取的证据高度重叠导致验证失效66% 相似待验证评估集要覆盖几类边界情况:改写问法、需要组合两个事实的问题、包含拼写错误的查询,以及没有任何来源能回答的问题。65% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/1048176API
curl https://kongchang.com/api/v1/knowledge/claims/1048176MCP
get_claim(id=1048176)