待验证60% 置信事实精确时间
纯解码器架构通过因果注意力掩码确保每个 token 只能关注其之前的上下文,适合自回归文本生成任务
2
来源数
60%
置信度
长期有效
时效性
2026/8/24
首次发现
来源
涉及实体
相关事实
待验证解码器在编码器基础上增加了掩码自注意力和交叉注意力两个机制,掩码自注意力保证生成时只能看到已产生的词,交叉注意力让解码器能查询编码器的输出75% 相似待验证decoder-only 架构仅使用 Transformer 解码器堆栈,通过因果注意力掩码以自回归方式逐个预测下一个 token,训练时根据前文预测后续内容。74% 相似待验证通过组件记忆化和状态拆分,可将每次 token 到达时的渲染范围从整个消息列表压缩到单一组件73% 相似待验证in-context conditioning 将文本条件与图像 token 拼接成同一序列,省去交叉注意力模块,但会导致序列变长和注意力计算量上升。72% 相似待验证要在解码阶段规避特定字符,需要建立token到字符的映射,并在生成时动态屏蔽包含目标字符的token候选。72% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/796825API
curl https://kongchang.com/api/v1/knowledge/claims/796825MCP
get_claim(id=796825)