深度一致性保持哈希自动编码器

多流形相似性保持

针对神经图像跨模态检索中忽略流形连续相似性和哈希码判别性不足的问题,提出一种基于多子流形约束的一致性保持哈希模型,在多个医学图像数据集上取得最先进的检索性能。

Xinyu, Wang · 曾宪华

Scientific Reports 2023

技术优势

流形相似性保持

从多子流形角度定义异构和同构样本的连续相似性,使哈希码在保持局部邻域结构的同时提升语义一致性。

语义判别哈希码

通过多语义一致性与多流形相似保持约束,增强相同语义哈希码的判别力,减少检索误差。

多模态扩展性

当输入模态数大于2时,编码器采用多伪孪生网络提取各模态特定特征,适应不同医学成像模态组合。

应用场景