跨模态匹配网络

多尺度自适应

通过模态自适应特征调制和稀疏Transformer融合，增强跨模态特征的语义一致性，提升匹配精度和鲁棒性。

Zhang, Zhizheng · Wei, Pengcheng · Peilian, Wu · Jindou, Zhang · Boshen, Chang · Zhenfeng, Shao · 郭明强 · 吴亮 · Ma J.

Information Fusion 2026

技术优势

多尺度自适应调整

MAFM模块动态调整跨模态特征表示，增强模态间语义一致性。

聚焦相关区域

CM-STF模块采用Top-k选择机制，保留判别性特征并过滤无关内容。

开源可复现

代码和预训练模型已公开，便于直接使用或微调。

应用场景

• 遥感图像配准：为多源遥感影像提供高精度配准，支撑变化检测与地图更新。
• 多模态数据融合：提升异质传感器数据的语义对齐，便于后续融合分析。
• 视觉定位：增强跨视角、跨模态场景下的定位鲁棒性。