[控场AI]
基准MindEval2框架

MindEval2

面向心理健康AI的临床级评估框架,由MHQR评估量表和MindSim患者模拟两组件组成,支持纵向评估

时间轴 (近 90 天)

10月16日

MindEval2 是由两部分组成的心理健康AI评估框架:用于评估的心理健康质量量表(MHQR)和用于患者模拟的 MindSim。

待验证50%
10月16日

MHQR 由研究团队与博士级心理学家合作设计,将回复质量分解为显式、可操作的临床评分条目。

待验证50%
10月16日

MindSim 是一个 LLM 驱动的模拟框架,通过结合精心设计的患者画像与工具,产生更多样、更具挑战性的患者互动。

待验证50%
10月16日

MindSim 包含一个在每次交互之间更新的记忆组件,使 MindEval2 能够建模心理健康问题的纵向维度。

待验证50%
10月16日

研究团队在 MindEval2 上评估了 18 个专有模型和开源权重模型。

待验证50%
10月16日

在 MindEval2 的评估中,前沿模型在表层质量和边界问题上已有明显改善,但引导校准(guidance calibration)在所有模型中都是最主要的失败模式,构成了大部分质量差距。

待验证50%

全部知识事实 (6)

来源文章