待验证50% 置信事实精确时间
论文将长上下文退化与三种机制联系起来:得分混叠、位置混叠和 softmax 稀释
1
来源数
50%
置信度
长期有效
时效性
2026/9/22
首次发现
来源
涉及实体
相关事实
待验证稀疏注意力/KV压缩论文中存在对基线和自己方法进行不对等超参数调优的美化手法67% 相似待验证作者揭示论文中常见套路包括对基线和自己方法进行不对等的超参数调优、在速度对比中为自己方法定制高效Triton内核而基线保持原始实现、以及通过将问题放在上下文之前来夸大压缩效果66% 相似待验证研究者观察到三种发散模式:差异被吸收后收敛、差异持续导向不同结果、发散—再收敛—再发散65% 相似已验证分块策略中块太大导致语义焦点模糊,块太小导致上下文割裂,固定窗口、句子级、语义边界递归分块在不同场景各有权衡,没有普适最优解65% 相似待验证上下文压缩三类策略(摘要压缩、向量检索召回、结构化状态提取)在计算成本与信息保真度之间存在权衡65% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/940097API
curl https://kongchang.com/api/v1/knowledge/claims/940097MCP
get_claim(id=940097)