概念Position Bias / position bias
位置偏见
LLM-as-a-Judge评估范式中的已知缺陷，指裁判模型倾向于给对话中排列靠前或文本较长的答案打高分，与实际内容质量无关，属于系统性偏差
时间轴 (近 90 天)
10月19日
LLM 裁判存在位置偏见：成对比较时，裁判倾向于偏爱某个位置上的答案，通常是第一个；仅交换候选答案的顺序就能翻转排名（Wang et al.）。
待验证50%
LLM-as-a-Judge评估范式中的已知缺陷，指裁判模型倾向于给对话中排列靠前或文本较长的答案打高分，与实际内容质量无关，属于系统性偏差
LLM 裁判存在位置偏见：成对比较时，裁判倾向于偏爱某个位置上的答案，通常是第一个；仅交换候选答案的顺序就能翻转排名（Wang et al.）。