[控场AI]
基准

AIME

AIME(American Invitational Mathematics Examination)是一项面向AI数学推理能力的评测基准,源自美国数学邀请赛题目。该基准通过竞赛级别的数学难题,考察模型在代数、数论、几何、组合等领域的复杂推理与解题能力,题目需要多步骤逻辑推导,是衡量大语言模型高级数学推理水平的重要参考标准之一。

时间轴 (近 90 天)

10月12日

该模型在AIME与HMMT February竞赛数学集上取得满分

待验证50%
10月12日

AIME(美国数学邀请赛)是面向高中生的精英数学竞赛,题目以推理步骤多、答案唯一为特点

待验证50%
10月12日

Saluki在MBPP+取得78.0分,多步因果逻辑67.5分,AIME取得80.0分,保留原版82%~85%的数学推理能力

待验证50%
10月9日

模型在竞赛数学(如 AIME、IMO)和代码生成(如 Codeforces 竞赛题)上的得分在过去一年间出现近乎垂直的增长曲线

待验证50%
9月19日

数学推理类评测包括MATH和AIME,考察符号推导与多步骤计算

待验证50%
9月12日

部分大型语言模型已能在MATH、AIME等竞赛级题库中取得超过80%的正确率

待验证50%
8月31日

AIME只有30个样本,用少量种子跑出的微小分数差异不具统计显著性

待验证50%
8月30日

AIME只有30个样本,跑4个种子后以80分对比基线79分并加粗宣称超越,在统计上站不住脚

待验证50%

全部知识事实 (10)

来源文章