Unverified50% confidenceFactExact time
古德哈特定律指出当一个指标成为目标本身它就不再是好指标，测试集引入训练数据会导致模型考试成绩与真实能力脱钩
1
Sources
50%
Confidence
Long-term
Relevance
7/19/2026
First Seen
Sources
Related Claims
Verified跑分榜单衡量的是模型考试能力而非解决真实问题的能力81% similarUnverified古德哈特定律指出当某个质量指标成为优化目标，它就不再是好的质量度量，模型可能学会刷分而非真正改善79% similarVerified古德哈特定律描述：当一个度量指标变成目标时，它就不再是好的度量指标了79% similarUnverified当一个衡量指标变成目标，它就不再是一个好的衡量指标（Goodhart定律），当行业围绕MMLU、HumanEval、MATH等基准竞赛时这些测试被过度优化76% similarUnverified链式思维、少样本提示、自我一致性等提示词工程技巧无法让模型访问训练截止日期之后的信息，无法保证浮点运算的精确性，也无法处理模型从未见过的外部文件75% similar
Cite This Claim
Stable URI
https://kongchang.com/claim/560014API
curl https://kongchang.com/api/v1/knowledge/claims/560014MCP
get_claim(id=560014)