无标签跨模态检索
通过渐进图匹配和双级关联挖掘,无需跨模态标签即可建立可靠的可见光-红外对应关系。
叶茫 · Zesen, Wu · 杜博
IEEE Transactions on Pattern Analysis and Machine Intelligence 2025
PGM将跨模态对应挖掘视为图匹配问题,通过最小化全局匹配代价整合全局信息,而非仅依赖局部相似度。
结合聚类级PGM和实例级NICS,从多个层级建立关联,并通过OFS过滤不可靠对应关系,避免错误积累。
ACCL模块交替调整主导匹配方向,避免单一方向匹配导致的错误累积。
整个训练过程不依赖任何跨模态标签,适用于难以获取配对标注的实际场景。