[控场AI]
概念data exfiltration / 数据渗漏

数据外泄

指未经授权将数据从系统或组织传输到外部目的地的安全威胁,是AI模型安全领域的重要关注点,特别是在模型被怀疑通过工具调用向外部服务器发送用户数据时

核心事实

时间轴 (近 90 天)

10月19日

攻击可以通过组合多个合法工具调用实现数据外泄:读工具读取的内容可引导写工具,再通过通知工具传出,全程无工具被滥用、无凭证被盗、模型未被越狱。

待验证50%
10月19日

读工具加写工具加循环就构成一条数据外泄路径,除非有机制在工具边界上打断它。

待验证50%
10月16日

数据外泄可通过图片标签实现:Agent生成的回复若包含图片标签,当消息被渲染或客户端加载图片时,数据随URL请求发送给攻击者。

待验证50%
9月18日

数据外泄是指Agent在执行任务时被操控,将敏感信息发送至攻击者控制的外部端点

待验证50%
9月6日

智能体单独拥有的看似无害的权限(如读取文件和调用HTTP库)组合后可能实现数据外泄,这是工具组合涌现问题

已验证65%

全部知识事实 (5)

来源文章