待验证50% 置信基准精确时间
Jev在英语评论上准确率98.5%,在其他七种语言上93.4%,差距约5个百分点;九次漏检概率均在0.16-0.49之间,且全部520个案例中均正确识别语言。
1
来源数
50%
置信度
短期 (~14 天)
时效性
2026/10/13
首次发现
有效期至:2026/10/27
来源
涉及实体
相关事实
待验证即便单字符识别准确率达到99%,对于一个包含10个字符的字段,其整体正确率也仅约90%,这被称为"准确率衰减效应"73% 相似待验证Aplomb 1 在 JevBench Hard 上得分 77.5%,在 MASSIVE 数据集 51 种语言上平均 75% 零样本意图识别准确率72% 相似待验证在1700个容易用例加100个困难多语言用例的情形下,即便困难用例全军覆没一半,聚合通过率也可能只从97%掉到93%左右70% 相似待验证人类受试者在ARC题目上的平均正确率可达85%以上,而主流大语言模型长期徘徊在20%以下69% 相似待验证当Jev给出0.95以上置信度时(约占60%消息),准确率达95.8%,表明其置信度校准质量可靠69% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/1015388API
curl https://kongchang.com/api/v1/knowledge/claims/1015388MCP
get_claim(id=1015388)