基准SR-Text 测试集
SR-Text
vLLM Semantic Router 团队为语义路由场景自建的文本评测集,用于评估模型在候选答案选择或路由目标判断任务上的表现,未公开规模、构建方式和基线。
时间轴 (近 90 天)
10月27日
官方披露 d3-ultra 在团队自建的 SR-Text 测试中取得 87.2 的成绩。
待验证50%
10月27日
SR-Text 测试集的规模、构建方式、答案候选数量及具体度量方式(如准确率或 AUC)均未公开。
待验证50%
10月27日
自建评测集与公开基准之间往往存在口径差异,测试集难度分布、答案候选数量等因素会显著影响绝对分数,因此 87.2 更适合作为团队内部验收信号而非横向对比依据。
待验证50%