[控场AI]
概念derivation gap

推导鸿沟

LLM工具调用裁判模型的一种系统性缺陷:当输入中缺少某参数值的直接参考文本时,裁判即使面对完全正确的值也更倾向于拒绝,表明裁判依赖显式参考文本而非独立验证值正确性。

时间轴 (近 90 天)

10月14日

工具调用裁判模型存在系统性缺陷:当输入中找不到某个值的出处时,即使这个值完全正确,裁判也更倾向于拒绝它,这一现象被命名为'推导鸿沟'。

待验证50%
10月14日

推导鸿沟出现在三种场景中:值来自函数 schema 的默认值但用户从未提及;值需要从上下文中推理得出;或者包含该值的文本被截断在裁判输入之外。

待验证50%
10月14日

在一个完全没有截断的基准测试中,正确的默认值反而表现出最大的推导鸿沟,排除了截断导致伪影的解释。

待验证50%

全部知识事实 (3)

来源文章