基准
EcoAgent
面向真实场景的AI智能体工具检索评测基准,包含大量真实世界工具与查询-工具配对数据,覆盖语义检索质量和动态可靠性两个评估维度
时间轴 (近 90 天)
10月13日
arXiv论文RATED(2026-10-09)在语义工具检索之上叠加上下文赌博机层,使智能体能在不重新训练的情况下适应实时工具故障;在模拟中断场景中,错误工具选择率从86.2%降至2.9%;配套EcoAgent基准包含5172个工具和21万条查询。
待验证50%
10月12日
研究团队推出了EcoAgent基准,包含5172个真实世界工具和超过21万条查询-工具配对数据
待验证50%
10月12日
EcoAgent基准覆盖离线检索与动态可靠性评估两个维度
待验证50%
10月12日
研究团队已将RATED/EcoAgent的代码与数据集开源,GitHub地址为Elliotes/EcoAgent
待验证50%