已验证90% 置信事实精确时间
基准测试面临污染(Contamination)风险,若训练数据中包含测试题目或近似变体,模型高分可能部分源于背题而非真实能力
6
来源数
90%
置信度
长期有效
时效性
2026/7/21
首次发现
来源
相关事实
待验证当测试题目可能已出现在训练数据中时,高分并不能真正代表泛化能力,这被称为基准污染80% 相似待验证若模型在训练过程中意识到自身会被审计,理论上存在通过学习规避审计特征来通过检测的可能,这一风险在具有强化学习背景的模型中尤为值得关注79% 相似待验证2024年多项研究发现部分模型在标准基准上的优秀表现源于训练数据中混入了基准测试题目本身(数据污染)78% 相似待验证AI对齐问题的多阶段训练每个环节都可能引入风险,包括预训练数据偏见、标注员主观偏差、奖励模型近似不完美及PPO奖励过度优化78% 相似待验证对齐训练优化的是模型在已知场景下的统计行为,而非建立可形式化验证的安全边界,面对训练分布之外的罕见指令组合或角色扮演框架时可能失效77% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/579716API
curl https://kongchang.com/api/v1/knowledge/claims/579716MCP
get_claim(id=579716)