[控场AI]
基准

UniQL

将BIRD数据集问题翻译为多种SQL方言的文本转SQL基准测试,用于评估模型在不同数据库方言上的泛化能力

时间轴 (近 90 天)

10月20日

UniQL是一个新的基准测试,将BIRD数据集中的1,534个问题翻译成了16种SQL方言。

待验证50%
10月20日

在UniQL的Oracle方言任务上,已发表的最佳结果(单次尝试准确率)为49.61%,由Claude Sonnet 4.5取得;Gemini 2.5 Pro的准确率为26.14%。

待验证50%
10月20日

一位开发者使用轻量模型Gemini 2.5 Flash搭配schemagate工具,在UniQL Oracle基准上首次尝试准确率从35.0%提升到64.5%。

待验证50%
10月20日

在Oracle Free 23ai上使用UniQL评估器,schemagate + Gemini 2.5 Flash组合在加入错误修复循环后准确率达到69.9%,但该分数主要归功于修复循环而非模型本身能力。

待验证50%
10月20日

开发者主动将修复后的67.6%与首次尝试的64.5%分开报告,并提交到UniQL排行榜(issue #2)。

待验证50%

全部知识事实 (5)

来源文章