[
控场AI
]
知识动态
实体
播客
深度
开发者
关于
Get CLI
EN
概念
目标泛化偏差 / 目标误泛化
Goal Misgeneralization
AI安全领域的概念,指模型在训练分布之外的环境中,将其学到的目标或行为以设计者未预期的方式进行泛化,是AI对齐研究的重要问题
来源文章
Anthropic切断内部评估联网:AI代理失控引发安全反思
10月11日