概念Brier Score / 布莱尔分数
Brier分数
衡量概率预测质量的评估指标,计算预测概率与实际二元结果之间的均方误差,分数越低表示预测越准确,常用于评估预测模型的校准度
核心事实
时间轴 (近 90 天)
10月4日
在留出预测任务中,IRT在所评估的五种方法中取得了最佳的Brier分数
待验证50%
9月25日
滚动自适应规则会从此前已揭晓答案的历史批次中不断重新拟合阈值,在跨越16个后续LLM版本的测试中取得所有确定性系统里最优的平均Brier分数
待验证50%
9月18日
严格正确评分规则的核心性质是当且仅当预测者报告真实相信的概率时期望得分最大,常见例子包括对数似然损失和Brier分数
待验证50%
7月7日
Brier评分通过计算预测概率与实际结果之差的平方来评估校准质量,分数越低代表预测越准确
已验证75%