关系外推生成网络

语义关系驱动生成

通过将类别间语义关系外推到特征生成过程,该网络为未知类合成更具判别力的视觉特征,在广义零次学习基准上显著超越现有方法。

Yao, Wu · Xia, Kong · 谢源 · 曲延云

IEEE Transactions on Circuits and Systems for Video Technology 2024

技术优势

利用类别关系

通过外推已知类特征,生成的未知类特征与已知类紧密相关,更具判别力。

对齐视觉与语义

引入视觉-语义关系对齐损失和实例-原型对比损失,确保生成的特征与语义空间一致。

保留判别信息

判别保持损失在特征对齐前后保持信息,防止判别力下降。

混合特征更真实

特征混合模块合成更逼真且与已知类相关的未知类特征。

应用场景