模型LLaCO框架
LLaCO
一种基于连续扩散模型的文本生成框架,通过竞争感知语义调度(SRS)和球面加噪解决时序压缩问题,包含方向适配器和时间步条件调制。
时间轴 (近 90 天)
10月26日
LLaCO框架通过嵌入方向适配器和时间步条件调制,将预训练骨干网络适配到连续表示。
待验证50%
10月26日
LLaCO采用球面加噪过程,形式化为朝向掩码偏置端点的测地线插值,从而消除范数衰减并保留准确的token竞争。
待验证50%
10月26日
LLaCO是一个8B参数的模型实例,在实验中超越了之前的连续扩散基线,并与同等规模的离散扩散模型相媲美。
待验证50%
10月26日
LLaCO的局限在于实验主要与连续扩散基线对比,与离散扩散模型的竞争仅是匹敌而非超越。
待验证50%