[控场AI]
已验证65% 置信事实精确时间

YaRN通过频率域插值和注意力缩放扩展窗口，LongRoPE通过识别位置编码中的非均匀冗余实现更高效扩展，可将有效上下文从4K、8K扩展至128K乃至百万级token

3
来源数
65%
置信度
长期有效
时效性
2026/7/21
首次发现

来源

智谱GLM新模型即将发布：创始人预告解读与前瞻

相关事实

已验证Qwen3-27B原生支持约26万Token的长上下文，通过YaRN等技术可扩展到100万Token量级67% 相似待验证上下文窗口扩展技术如RoPE的NTK-aware缩放、ALiBi、Ring Attention将上下文长度从早期的4K推进到了128K甚至数百万token级别62% 相似待验证程序根据显存推荐上下文长度：8G显存推荐32K上下文，24G显存可支持128K61% 相似

引用此条事实

Stable URI
https://kongchang.com/claim/583803
API
curl https://kongchang.com/api/v1/knowledge/claims/583803
MCP
get_claim(id=583803)