已验证65% 置信基准精确时间
MMLU contains approximately 15,000 multiple-choice questions across 57 subjects, covering knowledge from high school to graduate level
3
来源数
65%
置信度
长期有效
时效性
2026/8/3
首次发现
来源
涉及实体
相关事实
已验证MMLU(Massive Multitask Language Understanding)涵盖57个学科的选择题,从人文社科到STEM测试模型的知识广度与深度78% 相似待验证MMLU由加州大学伯克利分校的Dan Hendrycks等人于2020年提出,涵盖57个学科领域、约15,000道选择题75% 相似待验证MMLU涵盖57个学科、近16,000道选择题;HumanEval由OpenAI开发包含164个编程题;GSM8K包含8,500道小学数学应用题74% 相似待验证MMLU和HellaSwag等早期基准主要考察模型的知识储备与语言理解能力57% 相似待验证MATH数据集由Hendrycks等人于2021年提出,包含12500道竞赛级数学题,涵盖七个子领域56% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/680090API
curl https://kongchang.com/api/v1/knowledge/claims/680090MCP
get_claim(id=680090)