UniQL
将BIRD数据集问题翻译为多种SQL方言的文本转SQL基准测试,用于评估模型在不同数据库方言上的泛化能力
时间轴 (近 90 天)
UniQL是一个新的基准测试,将BIRD数据集中的1,534个问题翻译成了16种SQL方言。
在UniQL的Oracle方言任务上,已发表的最佳结果(单次尝试准确率)为49.61%,由Claude Sonnet 4.5取得;Gemini 2.5 Pro的准确率为26.14%。
一位开发者使用轻量模型Gemini 2.5 Flash搭配schemagate工具,在UniQL Oracle基准上首次尝试准确率从35.0%提升到64.5%。
在Oracle Free 23ai上使用UniQL评估器,schemagate + Gemini 2.5 Flash组合在加入错误修复循环后准确率达到69.9%,但该分数主要归功于修复循环而非模型本身能力。
开发者主动将修复后的67.6%与首次尝试的64.5%分开报告,并提交到UniQL排行榜(issue #2)。
全部知识事实 (5)
UniQL是一个新的基准测试,将BIRD数据集中的1,534个问题翻译成了16种SQL方言。
50%待验证在UniQL的Oracle方言任务上,已发表的最佳结果(单次尝试准确率)为49.61%,由Claude Sonnet 4.5取得;Gemini 2.5 Pro的准确率为26.14%。
50%待验证一位开发者使用轻量模型Gemini 2.5 Flash搭配schemagate工具,在UniQL Oracle基准上首次尝试准确率从35.0%提升到64.5%。
50%待验证在Oracle Free 23ai上使用UniQL评估器,schemagate + Gemini 2.5 Flash组合在加入错误修复循环后准确率达到69.9%,但该分数主要归功于修复循环而非模型本身能力。
50%待验证开发者主动将修复后的67.6%与首次尝试的64.5%分开报告,并提交到UniQL排行榜(issue #2)。
50%