[控场AI]
模型SUPRA-TEX框架

SUPRA-TEX

一种单图高保真3D材质生成框架,通过解耦可见材质估计、投影对齐与观测引导的3D补全,实现可重光照PBR材质生成

时间轴 (近 90 天)

10月16日

SUPRA-TEX是一个单图生成带材质、可重光照3D资产的框架,通过解耦可见材质估计、表面对齐与观测引导的3D补全,在公开数据集上训练即达到SOTA水平。

待验证50%
10月16日

SUPRA-TEX仅使用公开数据集训练,却在几何条件纹理化和端到端资产生成两个任务上均达到SOTA,论文声称在野外图像上效果匹配甚至超越领先的商业系统。

待验证50%
10月16日

SUPRA-TEX的阶段一训练了一个基于多模态大语言模型(MLLM)的图像编辑模型,用于在参考视角下预测光照分离的PBR材质图,输出反照率、粗糙度、金属度等通道。

待验证50%
10月16日

SUPRA-TEX的阶段二将预测出的PBR图投影到可见表面,并通过预训练的材料VAE编码器转化为与生成目标共享同一隐空间的'原生观测隐编码',以实现超对齐。

待验证50%
10月16日

SUPRA-TEX的阶段三采用交错流变换器,将观测隐编码作为固定只读锚点,在未观测区域更新和全表面更新之间交替进行,最终生成完整的材质隐编码。

待验证50%
10月16日

SUPRA-TEX对2D编辑模型的材质估计精度有较强依赖,若参考图存在极端光照或遮挡,投影阶段的误差可能传递到最终结果。

待验证50%
10月16日

SUPRA-TEX验证了一条设计原则:将生成任务与感知任务解耦,用2D领域的成熟能力反哺3D生成。

待验证50%
10月16日

SUPRA-TEX的项目页已公开。

待验证50%

全部知识事实 (8)

来源文章