Unverified50% confidenceFactExact time
RadixAttention 通过将 KV Cache 组织为前缀树结构,使具有相同前缀的多个请求共享同一份缓存
1
Sources
50%
Confidence
Long-term
Relevance
7/17/2026
First Seen
Sources
Related Claims
UnverifiedRadixAttention 引入全局共享 KV Cache 池,通过引用计数和 LRU 淘汰策略管理缓存生命周期,并在 Radix Tree 中执行最长前缀匹配75% similarUnverifiedSGLang 的 RadixAttention 技术利用基数树结构缓存不同请求间的共享提示前缀,100个用户使用同一系统提示词时只需计算1次KV Cache74% similarUnverifiedSGLang的核心创新RadixAttention将KV缓存组织为前缀树结构,使具有公共前缀的多个请求能够共享缓存73% similarUnverified语义记忆层的实现通常借助向量数据库(如Chroma、Qdrant、Pinecone)进行向量化存储和相似度检索,这一技术路线被称为RAG62% similarUnverified语义缓存将历史请求转化为向量嵌入存储在向量数据库中,通过余弦相似度超过阈值时直接返回缓存结果,GPTCache已将该能力产品化59% similar
Cite This Claim
Stable URI
https://kongchang.com/claim/536620API
curl https://kongchang.com/api/v1/knowledge/claims/536620MCP
get_claim(id=536620)