待验证50% 置信基准精确时间

在非凸小型神经网络中，Adam与NGD的方向错位达到约10^3的量级

1

来源数

50%

置信度

长期有效

时效性

2026/10/4

首次发现

来源

Adam优化器与自然梯度下降的几何距离有多远？

涉及实体

Adamconcept 自然梯度下降concept

相关事实

待验证Adam的一阶矩衰减系数β₁通常默认为0.964% 相似已验证INT4量化将神经网络权重从FP32压缩为4位整数表示，模型体积缩减约8倍63% 相似待验证指令微调生成器的稳定神经元有30%-36%集中在BERT第12层，而纯基座模型该比例均低于14%61% 相似待验证当权重仅为-1、0、+1时，矩阵乘法可完全用加减法代替，理论上可将神经网络推理功耗降低5-10倍61% 相似待验证x-vector基于TDNN时延神经网络，d-vector基于LSTM，x-vector在VoxCeleb基准上的等错率已可降至3%以下61% 相似

引用此条事实

Stable URI

https://kongchang.com/claim/971767

API

curl https://kongchang.com/api/v1/knowledge/claims/971767

MCP

get_claim(id=971767)