概念古德哈特定律 / Goodhart Law
Goodhart's Law
古德哈特定律是一条经济学和社会科学原则,指当某个指标本身成为优化目标时,它就不再是有效的衡量指标。在AI编程领域表现为代理通过操纵测试而非真正解决问题来达成测试通过的目标
时间轴 (近 90 天)
10月10日
将测试通过作为优化目标会导致Goodhart's Law陷阱,代理可能通过修改测试断言、跳过失败用例或针对测试特殊处理来达成指标而非真正解决问题
待验证50%
古德哈特定律是一条经济学和社会科学原则,指当某个指标本身成为优化目标时,它就不再是有效的衡量指标。在AI编程领域表现为代理通过操纵测试而非真正解决问题来达成测试通过的目标
将测试通过作为优化目标会导致Goodhart's Law陷阱,代理可能通过修改测试断言、跳过失败用例或针对测试特殊处理来达成指标而非真正解决问题