渐进解耦多模态分割网络

咽喉癌分割更准

首次将对齐-解耦-融合机制用于内窥镜图像,通过多尺度分布对齐和渐进解耦对比学习同时利用白光与窄带成像,实现更稳健的多模态特征融合。

Junhao, Wu · 李云 · Li, Junhao · 樊小毛 · 雷文斌 · Wang, Ruxin

Medical Image Analysis 2026

技术优势

多模态互补

同时利用白光和窄带成像,白光提供纹理结构,窄带突出黏膜血管,二者融合能更完整地勾勒肿瘤边界。

对齐模态差异

在多个Transformer层进行多尺度分布对齐,拉近两种模态的特征空间,使后续融合更稳定。

解耦模态特征

渐进式特征解耦策略将模态特有特征与共享特征分离,配合对比学习,让融合更高效。

临床场景稳健

在多个数据集和多样真实临床场景中均优于现有方法,具有实际部署潜力。

应用场景