多级特征注入融合网络

目标突出且纹理清晰

利用多级特征注入和注意力引导机制，该融合网络能在增强红外目标显著性的同时，保留可见光图像丰富的背景纹理。

董爱美 · Long, Wang · Jian, Liu · 吕国华 · Zhao, Guixin · Cheng, Jinyong

Pattern Recognition 2024

技术优势

注意力引导融合

引入注意力机制指导特征融合过程，使融合网络能自适应地关注重要特征，提高融合精度。

分层融合策略

针对浅层特征（保留细节）和深层特征（提取语义）采用不同融合策略，实现显著目标强度分布的自适应控制和背景纹理的保留。

应用场景

• 多模态融合网络：提供更强的红外与可见光图像融合能力，提升目标显著性并保留纹理，可直接用于安防监控、自动驾驶等场景。
• 视觉感知模型：作为视觉感知模型，能够输出信息更完整的融合图像，为后续检测、识别等任务提供更优输入。
• 机器人视觉：增强的融合图像有助于机器人在复杂光照或低能见度环境下更准确地感知场景，提高决策可靠性。