[KongchangAI]
ModelYuE2 / Yue2

YuE2

开源音乐生成模型YuE系列的迭代版本,专注于根据文本提示或歌词生成带有人声演唱和伴奏的完整音乐片段,支持歌词到人声的映射

Core Facts

Timeline (last 90 days)

Sep 24

YuE2是一个由香港团队联合香港高校共同开发的开源AI音乐生成模型

Unverified50%
Sep 24

目前还没有适配YuE2模型的现成ComfyUI节点,需自行编写脚本模拟节点功能

Unverified50%
Sep 24

YuE2模型本身不支持商用,生成中断后不支持断点续传,只能重新开始

Unverified50%
Sep 24

YuE2爆显存时可调低相关参数进行降配运行,代价是生成速度变慢

Unverified50%
Sep 24

YuE2脚本的默认模型路径是models/月二-3b文件夹,绝大多数找不到模型的报错都是因为模型放错位置

Unverified50%
Sep 24

本地AI模型部署时应先用约30秒短音频做冒烟测试,以低成本验证环境与模型是否匹配,避免长时间生成后崩溃

Unverified50%
Sep 24

UP主使用2080Ti 22G显卡生成一首歌大约需要十几分钟

Unverified50%
Sep 24

YuE2提供专门的FP16版本以覆盖不支持BF16的图灵架构显卡用户

Unverified50%
Sep 24

YuE2官方建议的运行环境是24GB以上显存

Unverified50%
Sep 24

YuE2是一个3B参数规模的模型,磁盘占用约6.8GB,加上约0.5GB的VAE模型整体权重约7.3GB

Unverified50%

40 more timeline events

All Facts (20)

Verified

YuE2-3B 是一款开源音乐生成模型

70%
Verified

YuE 是一个开源音乐生成模型系列,能根据文本提示或歌词生成带有人声演唱和伴奏的完整音乐片段

70%
Verified

Yue2根据用户提供的歌词和风格提示,生成以ABC记谱格式呈现的旋律和和弦符号化方案

65%
Partially Verified

音频是时序信号,音乐生成模型需要保持长时间跨度上的连贯性,将其集成进以图像/视频为主的工作流引擎需要在采样调度、内存管理和输出格式上做专门适配

75%
Unverified

YuE2 Studio 提供 Full、Melody、Direct 三种音频模式供用户选择

60%
Unverified

Yue2是一款采用白盒符号规划方法的音乐生成模型,将音乐生成分解为符号化方案生成和音频渲染两个阶段

60%
Unverified

本地AI模型部署时应先用约30秒短音频做冒烟测试,以低成本验证环境与模型是否匹配,避免长时间生成后崩溃

50%
Unverified

YuE2脚本的默认模型路径是models/月二-3b文件夹,绝大多数找不到模型的报错都是因为模型放错位置

50%
Unverified

YuE2是一个3B参数规模的模型,磁盘占用约6.8GB,加上约0.5GB的VAE模型整体权重约7.3GB

50%
Unverified

YuE2提供专门的FP16版本以覆盖不支持BF16的图灵架构显卡用户

50%
Unverified

YuE2模型本身不支持商用,生成中断后不支持断点续传,只能重新开始

50%
Unverified

YuE2是一个由香港团队联合香港高校共同开发的开源AI音乐生成模型

50%
Unverified

UP主使用2080Ti 22G显卡生成一首歌大约需要十几分钟

50%
Unverified

YuE2官方建议的运行环境是24GB以上显存

50%
Unverified

YuE2爆显存时可调低相关参数进行降配运行,代价是生成速度变慢

50%
Unverified

目前还没有适配YuE2模型的现成ComfyUI节点,需自行编写脚本模拟节点功能

50%
Unverified

由于 YuE2 有时会在没有人声音符的乐谱里加入类人声内容,工具箱提供可选的「Whisper 校验」,转录渲染结果并在次数限制内重新渲染,无法产出干净版本时保留最不像人声的版本

50%
Unverified

YuE2 Studio 完全本地运行,需嵌入已有的 YuE2 安装环境,当前面向 YuE2 0.1.6 版本

50%
Unverified

YuE2通过显式的段落标签(如verse、chorus)引导生成结果的宏观结构

50%
Unverified

3.0保留了常规的YuE2生成和MiniMax Music 3功能,用户可在同一环境切换从零生成和基于源曲翻唱两种方式

50%

Source Articles