待验证50% 置信事实精确时间

多头注意力中不同的注意力头往往捕捉不同类型的语义关系，有的关注语法依存，有的关注指代关系

1

来源数

50%

置信度

长期有效

时效性

2026/10/8

首次发现

来源

Transformer可视化学习资源推荐：从编码器到解码器

涉及实体

Multi-Head Attentionconcept

相关事实

待验证提示词中靠前的词汇对生成结果影响更大，因为交叉注意力机制对序列开头的token赋予略高的注意力分数78% 相似已验证注意力权重作为可解释性依据存在争议，高注意力权重并不总是对应高因果影响74% 相似待验证评测机制将研究注意力高度集中在少数几个主导数据集上，形成马太效应73% 相似待验证随着对话轮次增加，后续内容在注意力机制中的权重上升，系统提示词的影响力被稀释，导致人格漂移现象73% 相似待验证长上下文模型在自我审查场景中因锚定效应可能带来更大偏差，早期生成内容对后续注意力计算影响越显著72% 相似

引用此条事实

Stable URI

https://kongchang.com/claim/987728

API

curl https://kongchang.com/api/v1/knowledge/claims/987728

MCP

get_claim(id=987728)