ComfyUI-Olm-YuE2
基于YuE2音乐生成模型的ComfyUI自定义节点集,将生成流程拆分为Plan、Semantic、Synthesize、Decode四个可干预阶段,支持ABC记谱法乐谱编辑,提供分阶段可控的AI音乐创作工作流
Timeline (last 90 days)
ComfyUI-Olm-YuE2 是由开发者 o-l-l-i 打造的自定义节点集,将 YuE2 音乐生成模型集成进 ComfyUI 工作流
ComfyUI-Olm-YuE2 只需提供音乐风格描述和歌词即可生成 48 kHz 立体声歌曲
ComfyUI-Olm-YuE2 将音乐生成流程拆分为 Plan、Semantic、Synthesize、Decode 四个阶段,每个阶段的中间结果都可检查、保存、复用及分支
该项目提供可选的乐谱编辑 UI,包含五线谱渲染、ABC 乐谱视图和 ABC 编辑器节点,需在 ComfyUI 设置中启用
该乐谱 UI 完全可选,常规节点执行和 API 工作流不依赖它
ComfyUI-Olm-YuE2 复用 ComfyUI 自带的 Torch/Transformers,只需额外安装 tiktoken 和 accelerate 两个包
该项目的测试环境为 CUDA v13.0 与 Python 3.13,并在全新安装的 ComfyUI 上验证过安装流程
作者目前只在一张 RTX 5090 上做过完整测试,README 中给出了实测的显存占用数据
项目内置实验性的显存卸载机制(在工作流 06 中演示),能显著降低内存占用但过程中仍会出现内存峰值
作者正在研究可选的量化方案以进一步节省显存,但量化带来的内存节省与音频质量之间的权衡仍需测试,尤其在合成阶段
2 more timeline events
All Facts (10)
ComfyUI-Olm-YuE2 是由开发者 o-l-l-i 打造的自定义节点集,将 YuE2 音乐生成模型集成进 ComfyUI 工作流
50%UnverifiedComfyUI-Olm-YuE2 只需提供音乐风格描述和歌词即可生成 48 kHz 立体声歌曲
50%UnverifiedComfyUI-Olm-YuE2 将音乐生成流程拆分为 Plan、Semantic、Synthesize、Decode 四个阶段,每个阶段的中间结果都可检查、保存、复用及分支
50%Unverified该项目提供可选的乐谱编辑 UI,包含五线谱渲染、ABC 乐谱视图和 ABC 编辑器节点,需在 ComfyUI 设置中启用
50%Unverified该乐谱 UI 完全可选,常规节点执行和 API 工作流不依赖它
50%UnverifiedComfyUI-Olm-YuE2 复用 ComfyUI 自带的 Torch/Transformers,只需额外安装 tiktoken 和 accelerate 两个包
50%Unverified该项目的测试环境为 CUDA v13.0 与 Python 3.13,并在全新安装的 ComfyUI 上验证过安装流程
50%Unverified作者目前只在一张 RTX 5090 上做过完整测试,README 中给出了实测的显存占用数据
50%Unverified项目内置实验性的显存卸载机制(在工作流 06 中演示),能显著降低内存占用但过程中仍会出现内存峰值
50%Unverified项目本身不包含模型权重,用户需自行下载 YuE2 相关文件并放置到指定位置
50%