产品Model Router Auto-Eval
Model Router Auto-Evaluation
微软开源的Model Router评估工具，支持针对任意基线模型自动评估模型路由方案在质量、成本、延迟三个维度上的表现，并生成可视化看板
时间轴 (近 90 天)
10月2日
Model Router Auto-Evaluation是一个开源项目，能够针对任意基线模型自动评估Foundry Model Router在质量、成本、延迟三个维度上的表现
待验证50%
10月2日
官方建议裁判模型应不同于基线模型，以避免模型自己给自己打分导致偏袒与自身风格相近的输出
待验证50%
10月2日
Model Router Auto-Evaluation项目自带一组10条提示词的样本数据集，用户可替换成自定义数据集
待验证50%
10月2日
基线模型和裁判模型的部署名可以在Foundry门户的Build → Models中找到，自定义部署名需在default.yaml的pricing部分补充对应定价条目
待验证50%