对比跨模态哈希

免二值松弛

用可学习的哈希操作和全局排序损失,无监督跨模态检索不再受二值优化和假阴性对困扰。

胡鹏 · Zhu, Hongyuan · Lin, Jie · 彭德中 · 赵银平 · 彭玺

IEEE Transactions on Pattern Analysis and Machine Intelligence 2023

技术优势

免二值松弛

通过动量优化器让哈希操作在对比学习中端到端可学习,避免二值-连续松弛带来的性能损失。

抗假阴性对

跨模态排序损失利用所有样本对的判别性而非仅难负样本,缓解假阴性对的不利影响。

检索精度高

在五个常用数据集上与13种最先进方法相比取得更优检索性能,证明方法有效性。

应用场景