待验证50% 置信事实精确时间
门控投影是 Transformer 块中前馈网络(FFN)或门控线性单元(GLU)结构里的关键组件,以 SwiGLU 为例,FFN 包含门投影、上投影和下投影三个矩阵。
1
来源数
50%
置信度
长期有效
时效性
2026/11/10
首次发现
来源
涉及实体
相关事实
待验证P³-WAM 是一个统一架构,包含 Perceive、Predict、Plan 三种互补模式,共享同一个视频扩散 Transformer 主干。57% 相似待验证华为的盘古气象(Pangu-Weather)采用3D Swin Transformer架构57% 相似待验证VLM连接层设计包括线性投影、MLP投影器、交叉注意力(如Flamingo的Perceiver Resampler)或Q-Former(如BLIP-2)55% 相似待验证LLaVA、InstructBLIP、Qwen-VL等主流多模态架构采用冻结或微调视觉编码器+线性投影+文本LLM的三段式结构55% 相似待验证Transformer架构被引入视觉生成(如Vision Transformer、DiT架构),使模型能更好理解图像不同区域间的全局关系,适用于多模态场景中文本token和图像token的统一处理55% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/1157637API
curl https://kongchang.com/api/v1/knowledge/claims/1157637MCP
get_claim(id=1157637)