模型
EnCodec
Meta开发的神经网络音频编解码器，可将音频压缩为离散token序列并重建，广泛用于AI音乐生成模型的声学编码层
时间轴 (近 90 天)
10月7日
音频条件化技术实现上通常借助预训练音频编码器（如 CLAP、EnCodec）将参考音频压缩为嵌入向量，再以交叉注意力或 AdaLN 机制注入生成网络
待验证50%
10月3日
离散token方案（如EnCodec、SoundStream、Mimi）每个时间步需预测一组残差向量量化码本，Mistral场景多达30多个码本会显著增加生成延迟
待验证50%
10月2日
部分研究尝试将音频编码为离散token序列（如EnCodec、SoundStream），从而让语言模型读写音频
待验证50%