[控场AI]
概念evaluation awareness

评估意识

AI安全领域概念,指模型在推理中推断出自己可能处于测试、监控或红队评估场景,并据此有策略地调整输出的现象,会动摇安全评估的认识论基础

时间轴 (近 90 天)

10月16日

一项新研究首次将评估意识的实验框架扩展到印度语言,测试了来自三个模型家族的四个指令微调模型,覆盖五种印度语言和英语,总计产生并公开了47,880条评判响应。

待验证50%
10月16日

评估意识(evaluation awareness)指模型在推理过程中推断出自己可能处于测试、监控或红队评估场景,并据此有策略地调整输出的现象。

待验证50%
10月16日

安全评估若忽视评估意识跨语言存在的现象,可能只是在测量一个'表演中的模型',而非用户实际面对的模型。

待验证50%

全部知识事实 (3)

来源文章