待验证50% 置信事实精确时间

Qwen3 在训练时支持长达 128K tokens 的上下文

1

来源数

50%

置信度

中期 (~90 天)

时效性

2026/8/18

首次发现

有效期至：2026/11/16

来源

RTX 5090移动版本地跑Qwen3：Ollama+Cline编程实测体验

相关事实

待验证Qwen3.7 Max的上下文窗口达到256K token70% 相似待验证早期LLaMA-2仅支持4K token上下文，而DeepSeek-V3、Qwen2.5等新一代模型已将上下文扩展至128K甚至更长69% 相似待验证Qwen-2引入了GQA、支持128K token的上下文窗口和基于字节级BPE的分词器（词表约15万），参数规模从0.5B到72B69% 相似待验证Qwen3-27B原生支持约26万Token的长上下文，通过YaRN等技术可扩展到100万Token量级68% 相似已验证Qwen系列模型支持8K到128K不等的上下文窗口68% 相似

引用此条事实

Stable URI

https://kongchang.com/claim/771246

API

curl https://kongchang.com/api/v1/knowledge/claims/771246

MCP

get_claim(id=771246)