[控场AI]
基准LongBench v2

LongBench-v2

LongBench-v2是用于评估大语言模型长文本理解能力的基准数据集,包含多选题形式的长上下文问答任务,是长文本QA研究的重要评测集

时间轴 (近 90 天)

9月24日

在18k字符预算下,锚定混合检索达到36.18%准确率,BM25达到35.98%,而最佳的直接规划器引导方法仅为34.19%

待验证50%
9月24日

研究以LongBench-v2数据集的全部503道多选题为主要诊断集,答案模型采用Qwen2.5-7B-Instruct

待验证50%
9月24日

该研究的局限在于规模仅限于单一模型Qwen2.5-7B-Instruct和单一数据集LongBench-v2,且训练数据量较小(仅168题)

待验证50%

全部知识事实 (3)

来源文章