[控场AI]
产品

WARDEN

一个MCP工具定义安全扫描器,在MCPTox基准测试中表现突出,但对显式提示注入标记高度敏感,存在基准分数被标记污染的风险。

时间轴 (近 90 天)

10月17日

在MCPTox基准上,五个扫描器对218个留存测试工具的拦截数分别是:WARDEN 171、mcp-shield 41、truecopy 27、mcp-audit 25、mcpsentry 8。

待验证50%
10月17日

在MCPTox工具加上<IMPORTANT>前缀后,mcp-audit从25跳到222,truecopy从27跳到141,mcpsentry从8跳到136,WARDEN达到225/225,而mcp-shield前后都是41。

待验证50%
10月17日

在14,933个真实包上,五个扫描器的拦截率从低到高为:truecopy 1.7%(252个)、WARDEN 2.5%(369个)、mcp-audit 6.2%(928个)、mcpsentry 9.7%(1,449个)、mcp-shield 35.9%(5,354个)。

待验证50%
10月17日

作者手工审阅996个包样本后,mcp-shield的339个拦截中只有1个站得住(另有3个可争议);mcp-audit的58个全部不成立;mcpsentry的112个中1个成立、1个可争议;truecopy的17个全部不成立;WARDEN自己的23个拦截中,0个应直接拦截,4个可争议。

待验证50%
10月17日

WARDEN从v10升级到v12(v11增加转义、HTML实体、百分号编码和base64解码,v12停止放过"引用攻击短语但要求模型执行"的句子),在所有测试集上的判定与v10逐服务器完全一致。

待验证50%
10月17日

用deepseek-flash测试,分类器功能(high阈值)在218个MCPTox工具上拦截218个,45个干净服务器0误报;在200个随机真实服务器上拦截或标记从2个升至5个,在996个样本包上从23个升至35个。

待验证50%

全部知识事实 (6)

来源文章