待验证50% 置信事实精确时间

后续论文《The Era of 1-bit LLMs (BitNet b1.58)》发现纯1-bit需要很大规模才能匹配全精度质量，因此引入零状态，权重变为-1、0或+1。

1

来源数

50%

置信度

长期有效

时效性

2026/10/17

首次发现

来源

QAT与BitNet：1-bit及1.58-bit量化训练解析

涉及实体

BitNet b1.58model 三值权重concept

相关事实

待验证BitNet b1.58采用三值量化，每个权重取-1、0或+1三个值，约1.58 bit（log₂3）73% 相似待验证BitNet 1.58b量化在PCEI的24层网络中使用三值权重{-1, 0, +1}，相比FP16精度参数内存降低约4倍，推理时可用整数加法替代浮点乘法。66% 相似待验证NTK缩放无法减慢最快的那一对频率，因为θ₀ = base⁰ = 1，无论怎么调base都不变。61% 相似

引用此条事实

Stable URI

https://kongchang.com/claim/1053592

API

curl https://kongchang.com/api/v1/knowledge/claims/1053592

MCP

get_claim(id=1053592)