待验证50% 置信事实精确时间
当模型声称至少有 90% 把握时,实际正确率只有 56%,属于校准极差的模型;因此 ReachNT 向租户隐藏置信度百分比,42% 的危险报告在任何决策做出前被转给人工处理。
1
来源数
50%
置信度
中期 (~90 天)
时效性
2026/10/16
首次发现
有效期至:2027/1/14
来源
远程公房维修分诊系统:为何我选择对租户隐藏模型置信度
rss2026/10/16
涉及实体
相关事实
待验证模型有 89% 的概率能找到正确证据,但只有 20% 的概率将其转化为可验证的产品断言;71% 的功能最终没有任何经过验证的能力描述,工作流恢复率仅为 18%。76% 相似待验证模型报告的置信度与实际正确率严重脱节:95%置信度档实际正确率为0%,90%和70%档实际正确率均为100%。75% 相似待验证模型报出的概率(如90%)指的是模型对自己分类判断的把握程度,与业务紧急程度无关72% 相似待验证报告中门控准确率58%被误当成端到端质量,而真实端到端质量为98%72% 相似待验证按题目难度排序,所有模型都答对的60道题坚持率91.4%,至少一个模型答错的52道题坚持率仅73.5%,表明谄媚追踪不确定性72% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/1044780API
curl https://kongchang.com/api/v1/knowledge/claims/1044780MCP
get_claim(id=1044780)