文本知识驱动分割
将文本中的感染区域位置信息显式建模并融入分割模型，提升模型对肺部感染位置的感知能力。
Lexin, Fang · 李雪梅 · Yunyang, Xu · Zhang, Fan · 张彩明
Medical Image Analysis 2025
通过位置概率函数对文本中的感染区域位置信息进行概率建模，为每个图像区域分配病变概率，将空间信息显式集成到分割模型中。
引入文本视图后，采用统一的图像编码器提取文本视图特征，使文本和图像映射到同一空间，缓解语义空间不一致问题。
通过基于文本视图重叠和特征一致性的自监督约束进行特征增强，增强了模型鲁棒性和半监督能力。
多阶段知识迁移模块利用全局增强的交叉注意力机制，全面学习图像特征与文本视图特征之间的隐式相关性。