待验证50% 置信事实精确时间
自回归生成每个Token都需要完整的前向传播,而输入只需一次编码,这是输出比输入贵的成本结构原因
1
来源数
50%
置信度
长期有效
时效性
2026/7/17
首次发现
来源
相关事实
待验证自回归解码具有串行特性,每个Token的生成依赖前一个Token,难以并行78% 相似待验证代码场景中输入侧需携带大量代码上下文,输入 Token 量往往数倍于输出,放大成本75% 相似待验证生成输出的算力消耗通常远高于处理输入,部分厂商区分输入Token与输出Token的独立限额74% 相似待验证大语言模型推理中输出 token 的实际硬件成本远高于输入 token,因解码阶段是内存带宽受限的串行过程68% 相似待验证输出Token定价高于输入Token是因为Prefill阶段可并行矩阵运算而Decode阶段必须串行自回归解码,Decode阶段GPU吞吐量约为Prefill阶段的1/6到1/1068% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/547410API
curl https://kongchang.com/api/v1/knowledge/claims/547410MCP
get_claim(id=547410)