概念chance-normalized accuracy
机会归一化准确率
一种评估校正指标,将模型准确率映射到相对于随机猜测提升多少的统一尺度上,使跨基准的准确率比较更具意义
时间轴 (近 90 天)
10月28日
在36个模型-基准设置中,有34个设置高TVS条目在预训练结束时表现优于低TVS条目,平均优势为7.3个百分点的机会归一化准确率。
待验证50%
10月28日
机会归一化准确率的计算方式为(模型准确率 − 随机猜测准确率)/(1 − 随机猜测准确率)。
待验证50%
一种评估校正指标,将模型准确率映射到相对于随机猜测提升多少的统一尺度上,使跨基准的准确率比较更具意义
在36个模型-基准设置中,有34个设置高TVS条目在预训练结束时表现优于低TVS条目,平均优势为7.3个百分点的机会归一化准确率。
机会归一化准确率的计算方式为(模型准确率 − 随机猜测准确率)/(1 − 随机猜测准确率)。