待验证50% 置信事实精确时间
BitNet用BitLinear替换Transformer中的大部分Linear层，权重为±1（每权重1位），激活值为INT8。
1
来源数
50%
置信度
长期有效
时效性
2026/10/17
首次发现
来源
涉及实体
相关事实
待验证BitNet是微软研究院于2023年提出的架构级创新，核心思想是在Transformer架构中将线性层权重替换为1-bit表示71% 相似待验证深度递归指对单一输入快照的同一状态执行多轮迭代计算，Universal Transformer、DEQ等架构是代表65% 相似待验证相比RNN/LSTM架构，Transformer支持大规模并行计算64% 相似待验证Transformer自回归生成分为Prefill阶段（计算密集型，GPU利用率较高）和Decode阶段（带宽密集型，逐token生成）62% 相似已验证FLUX采用了DiT（Diffusion Transformer）架构，用纯Transformer替代了传统的U-Net结构61% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/1053588API
curl https://kongchang.com/api/v1/knowledge/claims/1053588MCP
get_claim(id=1053588)