待验证50% 置信基准精确时间

当模型援引的法律依据被替换为无关权威来源后，裁决发生改变的比率在CaseHOLD上仅为0.0%–21.7%，在ECHR和SCOTUS上为30.0%–76.7%，在ContractNLI上为43.3%–50.0%。

1

来源数

50%

置信度

长期有效

时效性

2026/10/13

首次发现

来源

引用不等于采纳：法律AI思维链忠实性审计

涉及实体

CaseHOLDconcept ECHRconcept SCOTUSconcept ContractNLIconcept

相关事实

待验证推理链污染对最终答案的影响相对较小（2%–30%），且只有2.9%–35.3%的支撑判断翻转与答案变化同时发生70% 相似待验证在显著性水平 ε=0.09 的设定下，63% 的结节获得了确定的单标签预测，剩余 37% 的病例被转交给临床医生判断67% 相似待验证在使用正确的、领域特定的理由方面，不同模型的表现从25.6%一路跨越到76.9%67% 相似待验证当相关文档被放置在上下文中间位置时，模型正确回答率相比放在首尾位置下降高达20-30个百分点66% 相似

引用此条事实

Stable URI

https://kongchang.com/claim/1013277

API

curl https://kongchang.com/api/v1/knowledge/claims/1013277

MCP

get_claim(id=1013277)