运动解耦网络

遮挡下精度增15%

面向遮挡手术场景的无监督运动估计网络,同时估计组织与器械运动,无需真实光流标注。

边桂彬 · Li, Zhang · He, Chen · 李振 · Pan, Fu · Wen-Qian, Yue · Yu-Wen, Luo · Pei-Cong, Ge · 刘卫朋

IEEE Transactions on Medical Imaging 2023

参数信息

组织运动估计误差
<2.2 pixels
准确率提升
15 %

技术优势

无监督也能学

不需要真实手术视频的逐像素光流标注,直接用未标注的术中图像训练,绕开了标注成本高的难题。

遮挡下更准

通过分割子网络无监督地估计器械分割图,获得遮挡区域,从而提升双运动估计的精度,在两个数据集的测试中误差低于2.2像素。

恢复逼真视觉

混合自监督策略配合遮挡补全,能够恢复被器械遮挡的组织区域,让运动估计更有依据。

应用场景