待验证50% 置信事实精确时间
实验中同一个模型作为欺骗者时,排名与作为辩护者时几乎一致:mistral是最有说服力的骗子(72%成功率),gemma2既最难被骗也最不擅长说谎。
1
来源数
50%
置信度
中期 (~90 天)
时效性
2026/10/13
首次发现
有效期至:2027/1/11
来源
涉及实体
相关事实
待验证谎言的"离谱程度"不能解释屈服率差异:S3的谎言是真相的10倍仍骗过9个辩护者,vCPU的谎言只是翻倍却只骗到2个。71% 相似待验证多项元分析研究显示,即便经过专门训练的人员,基于微表情判断谎言的准确率也仅略高于随机水平(约54%-60%)67% 相似待验证在正负样本比为1:99的欺诈检测任务中,将所有样本预测为'非欺诈'的模型也能获得99%的准确率66% 相似待验证单一的性能百分比具有误导性,号称保留98%性能的模型可能在特定任务类型上恰好落在损失的2%里,应在信任benchmark前用真实任务测试65% 相似待验证2023年的TruthfulQA基准测试显示,即便是当时最强的模型,在需要精确事实判断的问题上准确率也未超过60%65% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/1019899API
curl https://kongchang.com/api/v1/knowledge/claims/1019899MCP
get_claim(id=1019899)