待验证50% 置信基准精确时间
在Spider上,schemagate与论文最佳配置的AC-F1同为93.0,但schemagate误答率为5.1%,略高于论文的4.6%。
1
来源数
50%
置信度
短期 (~14 天)
时效性
2026/10/17
首次发现
有效期至:2026/10/31
来源
涉及实体
相关事实
待验证在 schemagate 的 benchmark 中,Spider 数据集 1034 个问题上纯数学排序准确率为 80.3%,重排序后为 96.5%;BIRD 数据集 1534 个问题上纯数学排序为 88.6%,重排序后为 96.7%。68% 相似待验证在基准测试中,Verdandi 字段宏准确率为97.0%,ACU为96.2%;Verdandi 行项目F1为0.958,ACU为0.947。64% 相似待验证Mindscend 团队的 26.2M 参数 GECToR 风格编辑标注器 v1.5 在 F0.5 指标上达到 0.799,误改率 2.4%,保护片段丢失率 0.0%。63% 相似待验证schemagate benchmark 的配对 McNemar 检验,Spider 上 p 值约 1e-49,BIRD 上约 1e-36。63% 相似待验证在尝试两到三次的情况下GLM-5.3 Flash得分82%,与GPT-5.6 Luna的81%处于误差范围之内61% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/1050459API
curl https://kongchang.com/api/v1/knowledge/claims/1050459MCP
get_claim(id=1050459)