待验证50% 置信事实精确时间
该研究提出的方法在RoPE（旋转位置编码）、SwiGLU（激活函数）和残差RMSNorm三个关键区域，将选定的中间结果保留在FP32精度，直到其BF16输出阶段再进行舍入。
1
来源数
50%
置信度
中期 (~90 天)
时效性
2026/10/26
首次发现
有效期至：2027/1/24
来源
涉及实体
相关事实
待验证FSRS由Anki社区的Jarrett Ye开发，使用稳定性、难度、可提取性三参数记忆模型，准确性相比SM-2提升约30%66% 相似待验证生产级实现如fplll通过MPFR库实现任意精度浮点运算，用于精度回退机制65% 相似待验证FP4-Local 使用量化感知蒸馏（QAD）：BF16 教师模型约束学生模型，学生路由专家权重在前向时量化到 NVFP4，梯度更新底层 BF16 权重。65% 相似待验证模型训练时常用FP32或混合精度，发布推理版本时通常转成FP16以减半体积。65% 相似已验证LLM推理的prefill阶段并行处理输入所有token并生成初始KV Cache，是计算密集型操作，是TTFT的直接决定因素63% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/1098063API
curl https://kongchang.com/api/v1/knowledge/claims/1098063MCP
get_claim(id=1098063)