已验证70% 置信事实精确时间
上下文长度与计算量呈近似平方级增长关系，受注意力机制影响
4
来源数
70%
置信度
长期有效
时效性
2026/7/12
首次发现
来源
Claude用量限制收紧：AI无限畅享时代终结了吗？
redditr/AnthropicAi2026/7/9
相关事实
待验证标准Attention的显存消耗随序列长度平方增长，Flash Attention将其压缩到线性增长85% 相似已验证自注意力机制的计算复杂度随序列长度呈近似二次方增长，序列长度为n时注意力矩阵计算量正比于n²81% 相似待验证自注意力使任意两个位置之间的信息交互只需一步计算，但显存占用随序列长度平方增长79% 相似待验证原始 Self-Attention 的计算量随序列长度呈平方级增长，Anthropic 通过优化位置编码（如 ALiBi）等技术手段拓展了可用上下文78% 相似待验证Transformer架构的注意力机制中，序列长度增加时早期token的注意力得分在softmax归一化后被后续token稀释，形成注意力沉没效应76% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/490971API
curl https://kongchang.com/api/v1/knowledge/claims/490971MCP
get_claim(id=490971)