概念joint scaling
联合缩放
DMD蒸馏中让批评者与教师模型同步扩大规模的策略,以保持容量匹配,防止训练崩溃并提升蒸馏效果
时间轴 (近 90 天)
11月2日
联合缩放策略让批评者与教师同步扩大规模,能够防止训练崩溃,并使学生模型从更大的教师中获益。
待验证50%
11月2日
STAC与联合缩放结合后在类别条件ImageNet生成任务上带来了一致的改进。
待验证50%
11月2日
STAC与联合缩放结合后在基于Wan2.1的文本到视频生成任务上证实了方法的有效性。
待验证50%
DMD蒸馏中让批评者与教师模型同步扩大规模的策略,以保持容量匹配,防止训练崩溃并提升蒸馏效果
联合缩放策略让批评者与教师同步扩大规模,能够防止训练崩溃,并使学生模型从更大的教师中获益。
STAC与联合缩放结合后在类别条件ImageNet生成任务上带来了一致的改进。
STAC与联合缩放结合后在基于Wan2.1的文本到视频生成任务上证实了方法的有效性。