概念潜空间表示 / 潜空间张量
Latent
扩散模型内部使用的低维压缩数据表示,由VAE将像素空间画面编码得到,去噪过程在此潜空间中完成,保留语义与运动信息并降低计算量
时间轴 (近 90 天)
10月23日
22帧Latent方案每段需携带上一段Latent作为参考,显存占用随段数增加而上升,因此每段时长必然短于独立生成。
待验证50%
9月16日
扩散模型的Latent(潜空间)是在压缩的低维空间中进行噪声扩散与去噪,再由VAE解码为像素输出,比原始像素空间操作快几个数量级
待验证50%
扩散模型内部使用的低维压缩数据表示,由VAE将像素空间画面编码得到,去噪过程在此潜空间中完成,保留语义与运动信息并降低计算量
22帧Latent方案每段需携带上一段Latent作为参考,显存占用随段数增加而上升,因此每段时长必然短于独立生成。
扩散模型的Latent(潜空间)是在压缩的低维空间中进行噪声扩散与去噪,再由VAE解码为像素输出,比原始像素空间操作快几个数量级