待验证95% 置信事实精确时间
Transformers come in three variants: encoder-only (like BERT), decoder-only (like GPT), and encoder-decoder (like T5)
1
来源数
95%
置信度
长期有效
时效性
2026/8/2
首次发现
来源
涉及实体
相关事实
待验证Transformer架构分化为BERT类（Encoder-only，适合理解任务）和GPT类（Decoder-only，适合生成任务）两大路线76% 相似待验证BERT只使用Transformer的编码器专练理解，GPT只使用解码器专练生成71% 相似已验证现代大模型（如GPT系列、Qwen、DeepSeek）普遍采用Transformer的Decoder-only变体69% 相似待验证GPT-2采用纯解码器的Transformer堆叠结构，去掉了编码器-解码器的交叉注意力部分，专注于单向自回归语言建模68% 相似已验证GPT、BERT、ChatGPT等现代AI系统均以Transformer为核心架构67% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/680567API
curl https://kongchang.com/api/v1/knowledge/claims/680567MCP
get_claim(id=680567)