YuE2
开源音乐生成模型YuE系列的迭代版本,专注于根据文本提示或歌词生成带有人声演唱和伴奏的完整音乐片段,支持歌词到人声的映射
Core Facts
Timeline (last 90 days)
YuE2是一个由香港团队联合香港高校共同开发的开源AI音乐生成模型
目前还没有适配YuE2模型的现成ComfyUI节点,需自行编写脚本模拟节点功能
YuE2模型本身不支持商用,生成中断后不支持断点续传,只能重新开始
YuE2爆显存时可调低相关参数进行降配运行,代价是生成速度变慢
YuE2脚本的默认模型路径是models/月二-3b文件夹,绝大多数找不到模型的报错都是因为模型放错位置
本地AI模型部署时应先用约30秒短音频做冒烟测试,以低成本验证环境与模型是否匹配,避免长时间生成后崩溃
UP主使用2080Ti 22G显卡生成一首歌大约需要十几分钟
YuE2提供专门的FP16版本以覆盖不支持BF16的图灵架构显卡用户
YuE2官方建议的运行环境是24GB以上显存
YuE2是一个3B参数规模的模型,磁盘占用约6.8GB,加上约0.5GB的VAE模型整体权重约7.3GB
40 more timeline events
All Facts (20)
YuE2-3B 是一款开源音乐生成模型
70%VerifiedYuE 是一个开源音乐生成模型系列,能根据文本提示或歌词生成带有人声演唱和伴奏的完整音乐片段
70%VerifiedYue2根据用户提供的歌词和风格提示,生成以ABC记谱格式呈现的旋律和和弦符号化方案
65%Partially Verified音频是时序信号,音乐生成模型需要保持长时间跨度上的连贯性,将其集成进以图像/视频为主的工作流引擎需要在采样调度、内存管理和输出格式上做专门适配
75%UnverifiedYuE2 Studio 提供 Full、Melody、Direct 三种音频模式供用户选择
60%UnverifiedYue2是一款采用白盒符号规划方法的音乐生成模型,将音乐生成分解为符号化方案生成和音频渲染两个阶段
60%Unverified本地AI模型部署时应先用约30秒短音频做冒烟测试,以低成本验证环境与模型是否匹配,避免长时间生成后崩溃
50%UnverifiedYuE2脚本的默认模型路径是models/月二-3b文件夹,绝大多数找不到模型的报错都是因为模型放错位置
50%UnverifiedYuE2是一个3B参数规模的模型,磁盘占用约6.8GB,加上约0.5GB的VAE模型整体权重约7.3GB
50%UnverifiedYuE2提供专门的FP16版本以覆盖不支持BF16的图灵架构显卡用户
50%UnverifiedYuE2模型本身不支持商用,生成中断后不支持断点续传,只能重新开始
50%UnverifiedYuE2是一个由香港团队联合香港高校共同开发的开源AI音乐生成模型
50%UnverifiedUP主使用2080Ti 22G显卡生成一首歌大约需要十几分钟
50%UnverifiedYuE2官方建议的运行环境是24GB以上显存
50%UnverifiedYuE2爆显存时可调低相关参数进行降配运行,代价是生成速度变慢
50%Unverified目前还没有适配YuE2模型的现成ComfyUI节点,需自行编写脚本模拟节点功能
50%Unverified由于 YuE2 有时会在没有人声音符的乐谱里加入类人声内容,工具箱提供可选的「Whisper 校验」,转录渲染结果并在次数限制内重新渲染,无法产出干净版本时保留最不像人声的版本
50%UnverifiedYuE2 Studio 完全本地运行,需嵌入已有的 YuE2 安装环境,当前面向 YuE2 0.1.6 版本
50%UnverifiedYuE2通过显式的段落标签(如verse、chorus)引导生成结果的宏观结构
50%Unverified3.0保留了常规的YuE2生成和MiniMax Music 3功能,用户可在同一环境切换从零生成和基于源曲翻唱两种方式
50%