[控场AI]
模型混元3D-Muse

3D-Muse

腾讯混元团队开源的端到端单图3D数字人生成模型,可从单张图像完成三维重建、骨骼绑定、材质贴图与表情驱动配置,输出可导出至Blender、Unity、Unreal Engine的完整资产

时间轴 (近 90 天)

11月17日

腾讯混元团队开源了3D-Muse,它能让一张立绘或照片生成可驱动、带表情和口型同步的数字人。

待验证50%
11月17日

3D-Muse采用端到端自动化生成流程,用户上传单视角图像后,系统在几分钟内完成三维重建、骨骼绑定、材质贴图与表情驱动配置。

待验证50%
11月17日

3D-Muse生成的结果可导出到Blender、Unity或Unreal Engine,且绑定骨骼与表情morph targets一并保留。

待验证50%
11月17日

3D-Muse采用生成式先验补全背面与侧脸纹理,并通过可微分渲染模块对齐原图光照,使重建结果在正脸视角下与原图高度一致。

待验证50%
11月17日

3D-Muse生成数字人配套音频驱动的口型动画接口,输入语音即可自动生成唇形关键帧,无需手动对口型。

待验证50%
11月17日

3D-Muse团队在开源仓库中提供了完整的环境配置脚本与示例工程,降低了复现门槛。

待验证50%
11月17日

当前3D-Muse版本对输入图像质量有一定要求:正面清晰、光照均匀的立绘效果最佳,复杂遮挡或低分辨率输入可能产生纹理拉伸。

待验证50%
11月17日

夸张表情下的面部形变稳定性、多视角一致性等仍是单图三维重建的共性难题,3D-Muse并未完全解决。

待验证50%
11月17日

3D-Muse将以往需要数小时甚至数天的建模、拓扑、绑定工作压缩到点击级别。

待验证50%
11月17日

3D-Muse适用于虚拟主播与短视频创作者、游戏与动画团队、教育与培训场景,以及研究者作为参考实现。

待验证50%

全部知识事实 (10)

来源文章