待验证50% 置信基准精确时间
将Qwen3.8 Flash-Next预训练的PLE(n-gram记忆)迁移到Qwen3.5-0.8B模型上,在冻结验证集上取得了5.05%的困惑度下降
1
来源数
50%
置信度
长期有效
时效性
2026/9/25
首次发现
来源
涉及实体
相关事实
待验证实验中冻结了Qwen3.5-0.8B主干和约510亿参数的PLE记忆模块,只训练了部署在解码器第3层和第9层的R=1读取器78% 相似待验证Qwen3.8 Flash Next 配备独立的Ngram嵌入系统,额外增加约510亿参数,这些参数不参与常规前向传播,仅在特定模式匹配时被激活71% 相似待验证Qwen3.8 Flash Next的基准成绩为Qwen官方数据,尚待第三方独立验证70% 相似待验证Qwen3.8-Flash-Next原生支持MTP,说明该能力在模型训练阶段就已内置69% 相似待验证阿里巴巴八月底发布的一款Qwen Flash模型也将510亿n-gram参数放进系统内存运行69% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/949983API
curl https://kongchang.com/api/v1/knowledge/claims/949983MCP
get_claim(id=949983)