概念avg at 12
avg@12
一种推理评测聚合指标,对同一批题目让模型采样12次,取各题正确率的平均值,降低采样随机性带来的方差,相比pass@1更稳定反映模型能力分布
时间轴 (近 90 天)
10月13日
avg@12 是指对同一批题目让模型采样 12 次,取各题正确率的平均,用于降低采样随机性带来的方差。
待验证50%
一种推理评测聚合指标,对同一批题目让模型采样12次,取各题正确率的平均值,降低采样随机性带来的方差,相比pass@1更稳定反映模型能力分布
avg@12 是指对同一批题目让模型采样 12 次,取各题正确率的平均,用于降低采样随机性带来的方差。