基准
AgentDyn
专为评估LLM智能体动态任务执行能力设计的基准测试框架,重点考察智能体在多步骤、工具调用链场景下的任务成功率,同时支持注入对抗性攻击(如提示注入)来评估防御方案有效性。
时间轴 (近 90 天)
9月30日
在AgentDyn基准测试中,环境引导的任务成功率超过无防御基线
待验证50%
9月30日
在AgentDyn基准测试中,环境引导将攻击成功率降至0%
待验证50%
专为评估LLM智能体动态任务执行能力设计的基准测试框架,重点考察智能体在多步骤、工具调用链场景下的任务成功率,同时支持注入对抗性攻击(如提示注入)来评估防御方案有效性。
在AgentDyn基准测试中,环境引导的任务成功率超过无防御基线
在AgentDyn基准测试中,环境引导将攻击成功率降至0%