待验证50% 置信基准精确时间
在 Spider 2.0-lite 的 135 道 SQLite 题上,Claude Sonnet 5.5 达到 71.9% 的执行准确率。
1
来源数
50%
置信度
短期 (~14 天)
时效性
2026/10/24
首次发现
有效期至:2026/11/7
来源
涉及实体
相关事实
待验证同一套流水线、同样的 135 道 Spider 2.0-lite SQLite 题上,Sonnet 拿到 71.9% 而 Opus 只有 67.4%,但在 BIRD 上 Opus 表现更好。76% 相似待验证在 Spider 数据集上,schemagate 与同模型(Claude Sonnet 4.5)得分持平,均为 93.0;论文在 Spider 上的最佳成绩来自 DeepSeek V3.2-Reasoning,达到 95.9。74% 相似已验证Claude Sonnet 5.5 在终端(Terminal)基准上达到 70.6%,而上一代仅有 10.3%71% 相似待验证在UniQL的Oracle方言任务上,已发表的最佳结果(单次尝试准确率)为49.61%,由Claude Sonnet 4.5取得;Gemini 2.5 Pro的准确率为26.14%。70% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/1092530API
curl https://kongchang.com/api/v1/knowledge/claims/1092530MCP
get_claim(id=1092530)