待验证50% 置信事实精确时间

答案选项顺序会导致Decisions API的置信度漂移约13个百分点

1

来源数

50%

置信度

长期有效

时效性

2026/10/12

首次发现

来源

OpenAI决策API的隐忧：换个选项顺序，概率就变了13个点

涉及实体

Decisions APIproduct

相关事实

待验证Layla对选项基数和位置极度敏感，在77类分类题上准确率跌到0.425，打乱选项顺序能让20%的答案发生翻转68% 相似待验证按题目难度排序，所有模型都答对的60道题坚持率91.4%，至少一个模型答错的52道题坚持率仅73.5%，表明谄媚追踪不确定性66% 相似待验证十二个模型中有十一个的认输案例里有87.5%到100%停在了用户提供的确切错误数字上，即认输通常意味着倒戈65% 相似待验证当选项顺序被颠倒时，开放权重模型Laya会改变30%的答案65% 相似待验证直接让大模型给候选人打分往往导致分数集中在某个区间（如7-9分），缺乏区分度65% 相似

引用此条事实

Stable URI

https://kongchang.com/claim/1002802

API

curl https://kongchang.com/api/v1/knowledge/claims/1002802

MCP

get_claim(id=1002802)