[KongchangAI]
Concept

CSA2

DeepSeek提出的KV缓存共享压缩技术,通过让神经网络不同层共享记忆而非各自独立存储,结合编码器-解码器结构实现KV缓存的极致压缩

Core Facts

Timeline (last 90 days)

Sep 22

V4.1 Flash使用CSA2(压缩稀疏注意力2)技术并结合FP4格式缓存数据,将全局KV Cache占用压缩到每token仅890字节

Unverified50%
Sep 16

DeepSeek V4.1 Flash简化了旧版本复杂的压缩吸收引擎,只保留了CSA2

Unverified50%
Sep 16

DeepSeek-V4.1-Flash 的 KV 缓存压缩至每 Token 890 字节,仅为 V4 Flash 的四分之一

Verified65%

All Facts (3)

Source Articles