待验证50% 置信事实精确时间
循环Transformer通过反复应用权重共享块R次来实现大有效深度,每个循环步骤维护独立的KV缓存。
1
来源数
50%
置信度
长期有效
时效性
2026/11/19
首次发现
来源
涉及实体
相关事实
待验证Universal Transformer通过权重共享(weight tying)让所有循环步骤复用同一组参数,在不增加参数量的前提下增加计算深度79% 相似待验证Transformer Block输入输出维度一致,使其可以任意堆叠,且每层参数完全独立71% 相似待验证循环Transformer的“循环次数”与标准Transformer的“层数”在计算图上有本质区别:标准深层网络中每一层拥有独立参数,而循环架构中同一组层被反复调用,参数共享但计算图展开后的深度可变。71% 相似待验证Transformer架构在自回归生成时需要对已处理过的token维护Key和Value张量70% 相似待验证标准Transformer是一种前馈式深度堆叠结构,思考深度固定,无论问题简单还是复杂都经过同样多的计算层70% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/1186354API
curl https://kongchang.com/api/v1/knowledge/claims/1186354MCP
get_claim(id=1186354)