待验证50% 置信事实精确时间
古德哈特定律指出当一个指标成为目标本身它就不再是好指标,测试集引入训练数据会导致模型考试成绩与真实能力脱钩
1
来源数
50%
置信度
长期有效
时效性
2026/7/19
首次发现
来源
相关事实
已验证跑分榜单衡量的是模型考试能力而非解决真实问题的能力81% 相似待验证古德哈特定律指出当某个质量指标成为优化目标,它就不再是好的质量度量,模型可能学会刷分而非真正改善79% 相似已验证古德哈特定律描述:当一个度量指标变成目标时,它就不再是好的度量指标了79% 相似待验证当一个衡量指标变成目标,它就不再是一个好的衡量指标(Goodhart定律),当行业围绕MMLU、HumanEval、MATH等基准竞赛时这些测试被过度优化76% 相似待验证链式思维、少样本提示、自我一致性等提示词工程技巧无法让模型访问训练截止日期之后的信息,无法保证浮点运算的精确性,也无法处理模型从未见过的外部文件75% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/560014API
curl https://kongchang.com/api/v1/knowledge/claims/560014MCP
get_claim(id=560014)