DaFISH
一种用于新视角合成的光照解耦方法,通过球谐函数表示光照,将每点发射颜色分解为表面反照率与SH光照因子,可插入任意NVS管线,解决主动光源与相机刚性绑定场景下的视角相关光照问题
时间轴 (近 90 天)
DaFISH是一种可插入任意新视角合成管线的光照解耦方法,通过球谐函数表示光照,将每点发射颜色分解为表面反照率与SH光照因子。
在五个场景的留出帧上,DaFISH取得了最高的平均PSNR(38.91 dB)、SSIM(0.9613)和LPIPS(0.0582),优于最强的泼溅基线和最接近的NeRF基线。
DaFISH训练完成后可以解析地计算任意相机位姿下的光照,无需重新训练,从而泛化到未见的视角。
DaFISH的关键在于SH到辐照度的转换具有闭式解,且体积渲染中的积分可微,因此反照率、SH光照系数和几何参数能通过反向传播同时更新。
DaFISH与现有NVS管线(如NeRF)无缝集成,验证了其通用性和有效性。
DaFISH目前主要针对静态场景,对于动态场景或复杂光照变化(如多个移动光源)的扩展仍需进一步研究。
全部知识事实 (6)
DaFISH是一种可插入任意新视角合成管线的光照解耦方法,通过球谐函数表示光照,将每点发射颜色分解为表面反照率与SH光照因子。
50%待验证在五个场景的留出帧上,DaFISH取得了最高的平均PSNR(38.91 dB)、SSIM(0.9613)和LPIPS(0.0582),优于最强的泼溅基线和最接近的NeRF基线。
50%待验证DaFISH训练完成后可以解析地计算任意相机位姿下的光照,无需重新训练,从而泛化到未见的视角。
50%待验证DaFISH的关键在于SH到辐照度的转换具有闭式解,且体积渲染中的积分可微,因此反照率、SH光照系数和几何参数能通过反向传播同时更新。
50%待验证DaFISH与现有NVS管线(如NeRF)无缝集成,验证了其通用性和有效性。
50%待验证DaFISH目前主要针对静态场景,对于动态场景或复杂光照变化(如多个移动光源)的扩展仍需进一步研究。
50%