跨模态全局特征对齐
通过模态内与模态间图注意力网络和对比学习,挖掘SAR与光学图像的全局共有特征,缓解辐射与几何差异。
胡新 · 吴艳 · Liu, Xingyu · Zhikang, Li · Zhifei, Yang · 李明
IEEE Transactions on Geoscience and Remote Sensing 2023
通过模态内与模态间的图注意力机制,传递节点消息聚合上下文信息,获取SAR与光学图像共有的全局特征,而非仅依赖局部特征。
设计的模态内与模态间对比学习策略在局部与全局特征上探索相似性,从而提升检测到的匹配点对数量。
在公开OS数据集上,所提算法的匹配点对数量和配准精度均超越现有最优算法。