[控场AI]
模型

FilterFusion

一种面向实时视频去噪的轻量级模型,采用低分辨率控制器与全分辨率可解释滤波器组融合的架构,在CPU单线程上实现1080p实时去噪。

时间轴 (近 90 天)

10月16日

FilterFusion 是一个仅 109K 参数的视频去噪模型,在 CPU 单线程上处理 1080p 视频可达 55.9 FPS。

待验证50%
10月16日

FilterFusion 在 CRVD 数据集上达到 34.72 dB PSNR 和 0.9330 SSIM。

待验证50%
10月16日

FilterFusion 网络本身的计算量为 0.18 GFLOPs。

待验证50%
10月16日

FilterFusion 在 1080p 分辨率、单 CPU 线程条件下推理速度为 17.9ms 每帧。

待验证50%
10月16日

FilterFusion 的架构采用低分辨率控制器加全分辨率滤波器组,将昂贵决策放在低分辨率上、便宜合成放在原始分辨率上。

待验证50%
10月16日

FilterFusion 的低分辨率控制器显式注入时间方差和空间方差两种先验线索。

待验证50%
10月16日

FilterFusion 的滤波器组包含高斯模糊、中值滤波、加权求和等经典操作。

待验证50%
10月16日

FilterFusion 的合成路径用 C 语言编译实现后在 CPU 上高效执行,不依赖 GPU 加速或专用推理框架。

待验证50%
10月16日

FilterFusion 的推理速度比需要 2 秒以上处理单帧的轻量 CNN 基线快 122 到 252 倍。

待验证50%
10月16日

FilterFusion 目前主要在 CRVD 数据集上验证,面对更复杂的真实场景时滤波器组的表现是否稳健还需进一步观察。

待验证50%

全部知识事实 (10)

来源文章