互信息多光谱融合网络

恶劣环境下分割更稳

利用互信息最大化捕捉跨模态共享语义，提升自动驾驶在复杂环境下的分割稳定性。

李映 · Fang, Aiqing · 郭阳明 · Xiaodong, Wang

IEEE Transactions on Industrial Informatics 2023

参数信息

验证数据集数量

4

技术优势

跨模态融合更准

利用互信息最大化在高维特征空间中捕捉同语义像素间的图像间关系，提升分割效果。

复杂环境更稳

融合表示模块结合图像恢复机制，增强系统在复杂环境下的整体性能和适应性。

应用场景

• 自动驾驶感知：在恶劣天气或光照下，用多光谱融合增强语义分割，提升车辆对环境的感知可靠性。
• 多传感器融合：将可见光与其他光谱信息融合，利用互信息最大化对齐跨模态语义，提高融合质量。
• 机器人视觉：为机器人提供更稳定的多光谱场景理解，适用于复杂光照或遮挡环境下的视觉任务。
• 智能交通系统：利用多光谱融合分割道路元素，提升交通监控和车辆协同中的感知准确性。