基准
OpenBookQA
开放书籍问答基准数据集,模拟开卷考试场景,要求模型结合核心科学知识与常识进行推理,以多项选择题形式评估
时间轴 (近 90 天)
9月18日
VisKG-LM在CommonsenseQA、OpenBookQA和MedQA-USMLE三个基准上相比GreaseLM基线分别提升了1.2、0.8和4.3个点
待验证50%
开放书籍问答基准数据集,模拟开卷考试场景,要求模型结合核心科学知识与常识进行推理,以多项选择题形式评估
VisKG-LM在CommonsenseQA、OpenBookQA和MedQA-USMLE三个基准上相比GreaseLM基线分别提升了1.2、0.8和4.3个点