SCOPE-4D
专门面向内窥镜场景的4D几何基础模型,能从单目RGB视频中通过单次前向推理同时预测相机参数、稠密几何结构及三维组织运动轨迹,集成CRM运动约束机制以分离相机运动与组织形变
时间轴 (近 90 天)
SCOPE-4D 是一个专门面向内窥镜场景的 4D 几何基础模型,能够从单目 RGB 视频中通过单次前向推理同时预测相机参数、稠密几何结构以及三维组织运动轨迹
研究团队新采集了体模(phantom)数据和真实结肠镜检查的评测集作为模型在真实临床环境下的验证基准
SCOPE-4D 首先在 SCOPE-5K 上进行几何监督微调(Geometric Supervised Fine-tuning),学习内窥镜场景特有的几何先验以改善相机位姿和深度估计准确性
SCOPE-4D 引入 Common-Residual Motion(CRM,共性-残差运动)机制,将运动分解为共性运动与残差运动两部分,以缓解相机与组织运动难以区分的问题
实验表明 CRM 与轨迹监督相结合在几何微调基础上进一步提升了相机和深度估计效果,并使模型具备稠密三维组织追踪能力
SCOPE-4D 在多个公开及新采集基准测试上在领域内和跨领域场景均表现稳健,三维追踪任务上相比现有方法具有明显优势
SCOPE-4D 在长序列结肠重建中表现出更好的稳定性
研究团队进行了盲测用户研究(blinded user study),结果支持该模型在真实临床视频上的重建质量感知评价
将相机参数、稠密几何与三维轨迹的联合预测整合到单次前向推理中为实时性应用奠定了基础
全部知识事实 (9)
SCOPE-4D 是一个专门面向内窥镜场景的 4D 几何基础模型,能够从单目 RGB 视频中通过单次前向推理同时预测相机参数、稠密几何结构以及三维组织运动轨迹
50%待验证研究团队新采集了体模(phantom)数据和真实结肠镜检查的评测集作为模型在真实临床环境下的验证基准
50%待验证SCOPE-4D 首先在 SCOPE-5K 上进行几何监督微调(Geometric Supervised Fine-tuning),学习内窥镜场景特有的几何先验以改善相机位姿和深度估计准确性
50%待验证SCOPE-4D 引入 Common-Residual Motion(CRM,共性-残差运动)机制,将运动分解为共性运动与残差运动两部分,以缓解相机与组织运动难以区分的问题
50%待验证实验表明 CRM 与轨迹监督相结合在几何微调基础上进一步提升了相机和深度估计效果,并使模型具备稠密三维组织追踪能力
50%待验证SCOPE-4D 在多个公开及新采集基准测试上在领域内和跨领域场景均表现稳健,三维追踪任务上相比现有方法具有明显优势
50%待验证SCOPE-4D 在长序列结肠重建中表现出更好的稳定性
50%待验证研究团队进行了盲测用户研究(blinded user study),结果支持该模型在真实临床视频上的重建质量感知评价
50%待验证将相机参数、稠密几何与三维轨迹的联合预测整合到单次前向推理中为实时性应用奠定了基础
50%