UniPro
统一多模态医学图像分割模型,在单一框架内同时支持语义分割、上下文分割、交互式分割和传播式分割四种模式,能够处理2D图像与3D体数据,并通过双向监督和3D监督提升体数据传播可靠性
时间轴 (近 90 天)
UniPro是一个统一的医学图像分割框架,在以切片为基本单元的框架内同时支持语义分割、上下文分割、交互式分割和传播式分割四种模式
UniPro的核心洞见是体数据传播与上下文分割本质上共享同一套参考条件预测机制,两者差别仅在于参考的图像-掩码对的来源
在体数据传播中,已分割的相邻切片扮演参考样例角色,待预测切片扮演查询图像角色
UniPro的四种分割模式共用同一套网络结构,区别仅在于喂给模型的模式特定条件输入不同
UniPro的语义分割模式通过类别先验作为条件输入进行预测
UniPro的交互式分割模式接受用户点击作为条件输入
UniPro在传统的逐片损失之外额外引入了双向监督和3D监督以提升传播可靠性
UniPro在多种成像模态和不同解剖结构的实验中,在所有分割设定下都取得了强劲表现
UniPro支持从稀疏的2D初始化出发高效完成完整的3D分割,减少医生逐片修正的工作量
UniPro作为arXiv预印本提出
全部知识事实 (10)
UniPro是一个统一的医学图像分割框架,在以切片为基本单元的框架内同时支持语义分割、上下文分割、交互式分割和传播式分割四种模式
50%待验证UniPro的核心洞见是体数据传播与上下文分割本质上共享同一套参考条件预测机制,两者差别仅在于参考的图像-掩码对的来源
50%待验证在体数据传播中,已分割的相邻切片扮演参考样例角色,待预测切片扮演查询图像角色
50%待验证UniPro的四种分割模式共用同一套网络结构,区别仅在于喂给模型的模式特定条件输入不同
50%待验证UniPro的语义分割模式通过类别先验作为条件输入进行预测
50%待验证UniPro的交互式分割模式接受用户点击作为条件输入
50%待验证UniPro在传统的逐片损失之外额外引入了双向监督和3D监督以提升传播可靠性
50%待验证UniPro在多种成像模态和不同解剖结构的实验中,在所有分割设定下都取得了强劲表现
50%待验证UniPro支持从稀疏的2D初始化出发高效完成完整的3D分割,减少医生逐片修正的工作量
50%待验证UniPro作为arXiv预印本提出
50%