[控场AI]
基准SR-Text 测试集

SR-Text

vLLM Semantic Router 团队为语义路由场景自建的文本评测集,用于评估模型在候选答案选择或路由目标判断任务上的表现,未公开规模、构建方式和基线。

时间轴 (近 90 天)

10月27日

官方披露 d3-ultra 在团队自建的 SR-Text 测试中取得 87.2 的成绩。

待验证50%
10月27日

SR-Text 测试集的规模、构建方式、答案候选数量及具体度量方式(如准确率或 AUC)均未公开。

待验证50%
10月27日

自建评测集与公开基准之间往往存在口径差异,测试集难度分布、答案候选数量等因素会显著影响绝对分数,因此 87.2 更适合作为团队内部验收信号而非横向对比依据。

待验证50%

全部知识事实 (3)

来源文章