ConceptBrier Score / 布莱尔分数
Brier分数
衡量概率预测质量的评估指标，计算预测概率与实际二元结果之间的均方误差，分数越低表示预测越准确，常用于评估预测模型的校准度
Core Facts
Timeline (last 90 days)
Oct 4
在留出预测任务中，IRT在所评估的五种方法中取得了最佳的Brier分数
Unverified50%
Sep 25
滚动自适应规则会从此前已揭晓答案的历史批次中不断重新拟合阈值，在跨越16个后续LLM版本的测试中取得所有确定性系统里最优的平均Brier分数
Unverified50%
Sep 18
严格正确评分规则的核心性质是当且仅当预测者报告真实相信的概率时期望得分最大，常见例子包括对数似然损失和Brier分数
Unverified50%