多光谱表征选择性耦合网络

光谱异质重构

通过注意力与傅里叶域的自适应令牌稀疏化,该网络在保留光谱特定关键信息的同时实现多光谱表征的选择性耦合,有效缩小跨光谱差异。

Yu, Zhi · 黄智勇 · 侯明阳 · Pei, Jiaming · Yan, Yan · Liu, Yushi · Sun, Daming

IEEE Transactions on Circuits and Systems for Video Technology 2024

参数信息

多光谱目标再识别基准数量
3

技术优势

保留光谱关键信息

通过注意力与傅里叶域的自适应稀疏化,网络能够筛选并保留各光谱最具判别力的令牌,避免融合过程中的信息丢失。

减小跨光谱差异

选择性的表征耦合策略在保留关键信息的同时显式缩小了光谱间差距,使模型更容易学习到模态不变的判别特征。

强化信息对齐

信息统一约束同时施加于特征级与分布级,进一步对齐多光谱信息,引导模型学习更具判别力的表征。

应用场景