待验证50% 置信事实精确时间

模拟验证了批大小因子 b^{1-t}，表明增大批大小可以减轻重尾梯度的影响。

1

来源数

50%

置信度

长期有效

时效性

2026/10/19

首次发现

来源

无限方差梯度下SGD的精确尾部定律

涉及实体

批大小concept 重尾梯度concept

相关事实

待验证细粒度监督信号能够减少对齐所需的样本数量，并提升最终模型的多维度均衡性72% 相似待验证投机解码通过小模型预测候选Token、大模型批量验证提升吞吐量；量化技术将权重从FP16压缩至INT8/INT4降低显存占用；MoE架构通过稀疏激活降低单次推理计算量67% 相似已验证量化技术通过将模型参数从32位浮点数降低到4位或8位整数表示，可大幅减少内存占用和计算量66% 相似待验证论文推导出显式的投影和超额目标尾部、极端分位数，以及固定批大小 b 下的因子 b^{1-t}。65% 相似待验证在因果图中将若干变量打包成聚类节点可以缩小图的规模、降低识别算法的复杂度65% 相似

引用此条事实

Stable URI

https://kongchang.com/claim/1064984

API

curl https://kongchang.com/api/v1/knowledge/claims/1064984

MCP

get_claim(id=1064984)