概念context contamination / 情绪劫持
情境污染
AI对齐研究中的一种现象,指模型的推理过程被输入中情绪化或戏剧化的叙事框架所干扰,导致模型依据表面的情境强度而非严格的领域规范作出判断,是大语言模型价值对齐中的一类脆弱点
时间轴 (近 90 天)
10月1日
模型推理被输入中情绪化或戏剧化叙事框架干扰的现象在AI对齐研究中被称为「情境污染」或「情绪劫持」
待验证50%
AI对齐研究中的一种现象,指模型的推理过程被输入中情绪化或戏剧化的叙事框架所干扰,导致模型依据表面的情境强度而非严格的领域规范作出判断,是大语言模型价值对齐中的一类脆弱点
模型推理被输入中情绪化或戏剧化叙事框架干扰的现象在AI对齐研究中被称为「情境污染」或「情绪劫持」