HLE
专门评估AI模型在专家级学术任务上表现的高难度基准测试,考察模型的世界知识广度与深度
核心事实
时间轴 (近 90 天)
GLM-5.3-Flash 在 DeepSWE v1.1 得63.4分,比 GLM-5.2 的46.2分提升17.2分;HLE 得55.3分。
高层次模拟(HLE)在更高抽象层面重新实现硬件功能,而低层次模拟(LLE)逐周期精确模拟原始硬件的每个电路行为
Qwen4 预览版在 HLE 推理榜单上只有 35.9 分,输给对手加强版的 40 分
AREX-2 在深度研究类任务上取得成绩:BrowseComp 84.0、HLE 52.6、GAIA 92.2、DeepSearchQA 93.8
据官方口径,V4.1 Flash在Terminal Bench 2.1、DeepSWE 1.1、CyberGym、HLE、Automation Bench、Agent's Last Exam等多个基准测试上成绩超过GPT-5.6 SOAR和Opus 5
在纯推理任务上Qwen3 27B的HLE只有30.8分,明显落后于Opus的40.0分
在HLE基准测试中,COMED将GPT-5.5的表现从23.1%提升到28.1%
HLE(Humanity's Last Exam)是由Scale AI联合众多领域专家构建的极高难度综合知识测试
在启用上下文管理下,Iris-mini在BrowseComp、BrowseComp-ZH、DeepSearchQA和HLE分别达到82.2%、84.8%、86.9%和52.3%
DeepSeek V4.1 Flash 在 GPQA、HLE 等方面的评分低于此前版本
还有 2 条时间轴事件
全部知识事实 (12)
DeepSeek V4.1 Flash 在 GPQA、HLE 等方面的评分低于此前版本
75%待验证Qwen3.8-27B在Terminal Bench、GPQA Diamond、HLE测试中均落后于Claude Opus 4.6(分别为73 vs 78.2、89.2 vs 91.3、30.8 vs 40)
60%待验证GLM-5.3-Flash 在 DeepSWE v1.1 得63.4分,比 GLM-5.2 的46.2分提升17.2分;HLE 得55.3分。
50%待验证高层次模拟(HLE)在更高抽象层面重新实现硬件功能,而低层次模拟(LLE)逐周期精确模拟原始硬件的每个电路行为
50%待验证Qwen4 预览版在 HLE 推理榜单上只有 35.9 分,输给对手加强版的 40 分
50%待验证AREX-2 在深度研究类任务上取得成绩:BrowseComp 84.0、HLE 52.6、GAIA 92.2、DeepSearchQA 93.8
50%待验证据官方口径,V4.1 Flash在Terminal Bench 2.1、DeepSWE 1.1、CyberGym、HLE、Automation Bench、Agent's Last Exam等多个基准测试上成绩超过GPT-5.6 SOAR和Opus 5
50%待验证在纯推理任务上Qwen3 27B的HLE只有30.8分,明显落后于Opus的40.0分
50%待验证在HLE基准测试中,COMED将GPT-5.5的表现从23.1%提升到28.1%
50%待验证在启用上下文管理下,Iris-mini在BrowseComp、BrowseComp-ZH、DeepSearchQA和HLE分别达到82.2%、84.8%、86.9%和52.3%
50%待验证HLE(Humanity's Last Exam)是由Scale AI联合众多领域专家构建的极高难度综合知识测试
50%待验证HLE(Humanity's Last Exam)是由 Scale AI 联合多位学术界专家推出的极高难度综合推理基准,涵盖数学、物理、生物、哲学、法律等数十个学科
50%