基准
CoSA-Bench
评估LLM Agent技能组合攻击CoSA的基准测试集,基于真实世界Skills和受控服务,覆盖招聘、财务、IT、业务四大领域共288个任务,评估数据泄露、未授权状态修改和不安全执行三类风险
时间轴 (近 90 天)
10月27日
研究者构建了 CoSA-Bench,基于真实世界 Skills 和受控服务,覆盖招聘、财务、IT 和业务四大领域,共 288 个任务,涉及数据泄露、未授权状态修改和不安全执行三类风险。
待验证50%
10月27日
在跨五个 LLM 和三种 Agent harness 的测试中,新增 Skills 上限仅为每个原始池的 5%,策略违规率就从 35.02% 提升到 58.45%,增加了 23.43 个百分点。
待验证50%