待验证50% 置信事实精确时间
FP8存在两种变体:E4M3(4位指数+3位尾数)精度更高适合前向推理,E5M2(5位指数+2位尾数)动态范围更大适合梯度计算
1
来源数
50%
置信度
长期有效
时效性
2026/7/12
首次发现
来源
LingBot-Video 1.3B 选择性FP8量化实测:采样提速22%
redditr/comfyui2026/7/11
相关事实
待验证混合精度训练中,FP16 每个参数占 2 字节显存,FP32 每个参数占 4 字节显存66% 相似已验证数值梯度检验通过中心差分公式 (f(θ+ε) - f(θ-ε)) / (2ε) 近似计算梯度,与解析梯度比较,相对误差小于1e-5认为正确,大于1e-3几乎确定存在bug66% 相似待验证Blackwell的FP4格式仅有4位(1位符号、2位指数、1位尾数),采用每128个FP4元素共享一个FP8精度缩放因子的块浮点表示64% 相似待验证Blackwell架构FP4矩阵乘法理论峰值算力相比FP16提升可达8倍63% 相似待验证INT4量化将原本由65536个不同值(FP16)表示的权重压缩到仅16个离散级别63% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/494667API
curl https://kongchang.com/api/v1/knowledge/claims/494667MCP
get_claim(id=494667)