跨模态层次聚类网络

无监督接近监督

该模型通过跨模态层次聚类与伪标签精炼,在无监督可见-红外人员再识别中提供了可靠的模态不变特征学习,性能与监督方法相当。

Pang, Zhiqi · 王春宇 · 赵玲玲 · Yang, Liu · Sharma, Gaurav

IEEE Transactions on Circuits and Systems for Video Technology 2023

技术优势

免去模态内初始化

直接进行跨模态聚类,避免了额外的计算时间,使得方法更易于扩展。

伪标签更可靠

通过检查可见光模态三个通道的聚类结果来消除不可靠的伪标签,提升特征学习质量。

无监督逼近监督

在无监督设置下达到与许多监督方法相当的性能,显著降低了标注成本。

应用场景