免二值松弛
用可学习的哈希操作和全局排序损失,无监督跨模态检索不再受二值优化和假阴性对困扰。
胡鹏 · Zhu, Hongyuan · Lin, Jie · 彭德中 · 赵银平 · 彭玺
IEEE Transactions on Pattern Analysis and Machine Intelligence 2023
通过动量优化器让哈希操作在对比学习中端到端可学习,避免二值-连续松弛带来的性能损失。
跨模态排序损失利用所有样本对的判别性而非仅难负样本,缓解假阴性对的不利影响。
在五个常用数据集上与13种最先进方法相比取得更优检索性能,证明方法有效性。