概念robust policy fidelity
稳健策略保真度
一种AI评测指标,要求模型在同一测试家族内所有变体(不同资质、身份、排版)的决策全部正确才计为通过,旨在同时衡量模型对资质差异的敏感性和对无关变化的稳健性,比条目级准确率更能反映系统性偏差。
时间轴 (近 90 天)
10月12日
稳健策略保真度(robust policy fidelity)指标以家族级通过率衡量,50%分数意味着一半家族通过全部检查,而非一半单项回答正确
待验证50%
一种AI评测指标,要求模型在同一测试家族内所有变体(不同资质、身份、排版)的决策全部正确才计为通过,旨在同时衡量模型对资质差异的敏感性和对无关变化的稳健性,比条目级准确率更能反映系统性偏差。
稳健策略保真度(robust policy fidelity)指标以家族级通过率衡量,50%分数意味着一半家族通过全部检查,而非一半单项回答正确