概念Graph-specific Transformer
图专用Transformer
面向图数据的Transformer变体,在注意力计算中联合建模节点与边特征,但自定义实现常无法利用硬件感知优化内核导致效率瓶颈
时间轴 (近 90 天)
10月21日
图生成模型常采用图专用Transformer架构联合更新节点与边特征,但难以直接利用FlashAttention等硬件感知的注意力实现,成为可扩展性的瓶颈。
待验证50%
10月21日
实验结果显示,与基线图专用Transformer相比,新架构在生成质量上保持相近水平,但峰值GPU显存降低了约65%。
待验证50%