质量感知RGBT融合检测器

微小人检测精度激增

通过质量感知学习与跨模态增强，专门提升无人机视角下微小行人的检测性能，在保持高质量样本的同时为微小目标提供充分监督。

Zhang, Yan · Xu, Chang · 杨文 · He, Guangjun · Yu, Huai · 余磊 · Xia, Gui Song

ISPRS Journal of Photogrammetry and Remote Sensing 2023

参数信息

微小人平均精度提升

6.57 points

小目标平均精度提升

3.80 points

技术优势

微小人提升显著

质量感知学习策略通过质量感知因子衡量样本质量，为微小目标提供充分监督，同时聚焦高质量样本，避免简单样本淹没训练信号。

模态可靠性可感知

质量感知跨模态增强模块为每个模态预测质量感知因子图，指示每个模态的可靠性并突出更可能出现目标的区域，从而在空间不平衡和位置偏移下实现有效融合。

超越强基线

在RGBTDronePerson上，微小目标mAP50比强基线高出6.57个百分点；在VTUAV-det上，小目标mAP提高3.80个百分点，证明方法有效。

应用场景

• 无人机搜索救援：在无人机大范围搜索中精准发现微小行人，提高救援效率。
• 多模态行人检测：融合可见光与热红外，在光照变化和恶劣天气下稳定检测行人。
• 智能监控：在监控场景中提升微小目标的检出率，减少漏报。