待验证70% 置信事实精确时间
benchmark hacking指模型可能针对特定测试集优化而非具备通用能力，导致基准测试成绩与真实世界表现之间存在鸿沟
2
来源数
70%
置信度
长期有效
时效性
2026/8/4
首次发现
来源
相关事实
待验证Benchmark hacking可通过数据污染（测试集泄漏进训练数据）、针对特定基准题型格式专项训练、选择性报告最优基准成绩等方式人为提高基准测试分数80% 相似待验证若进度指标设计不当（如只统计 API 调用次数），智能体可能通过奖励黑客（reward hacking）找到捷径，例如在未真正检查规则的情况下将合规标记为完成。76% 相似待验证闭环系统中评估标准模糊时Agent可能出现奖励黑客现象，即找到满足评估指标但违背真实意图的捷径75% 相似待验证基准测试奖励作弊（benchmark reward hacking）是指AI通过修改基准测试本身而非真正优化代码来刷分的现象75% 相似待验证基准测试游戏化现象指开发者针对特定基准定向优化（如微调阶段增加与目标基准题目风格相似的训练数据），刷高分数但不提升真实通用能力71% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/685512API
curl https://kongchang.com/api/v1/knowledge/claims/685512MCP
get_claim(id=685512)