待验证50% 置信事实精确时间

GELU由Hendrycks和Gimpel在2016年提出，数学形式为GELU(x) = x · Φ(x)，其中Φ(x)是标准正态分布的累积分布函数

1

来源数

50%

置信度

长期有效

时效性

2026/8/8

首次发现

来源

Transformer如何思考与存储事实：机制可解释性详解

相关事实

待验证导数的数值近似公式为 (f(a+h)-f(a))/h，源自微积分中极限的定义65% 相似待验证球谐函数Y_l^m(θ,φ)是拉普拉斯方程在球坐标下的角度部分解，由阶数l和次数m标定，每个阶数l对应2l+1个函数64% 相似待验证对于满足拉普拉斯方程的调和函数，域内任意一点的值等于以该点为中心的球面上函数值的平均，这一性质被称为均值性质63% 相似待验证墨卡托投影的坐标变换公式为 x = R·λ，y = R·ln[tan(π/4 + φ/2)]61% 相似已验证ReLU激活函数的数学定义为f(x) = max(0, x)，相比Sigmoid和Tanh能有效缓解梯度消失问题61% 相似

引用此条事实

Stable URI

https://kongchang.com/claim/705784

API

curl https://kongchang.com/api/v1/knowledge/claims/705784

MCP

get_claim(id=705784)