轻量跨模态
通过特征融合与协同增强,在保持轻量化的同时显著提升可见光-热红外跟踪的准确性与效率。
Hu, Xue · 朱浩 · Ran, Zhidan · 唐贤伦 · Qi, Guanqiu · 朱智勤 · Kuok, Sin Chi · Henry, Leung
IEEE Transactions on Circuits and Systems for Video Technology 2025
只引入 0.23M 可训练参数,远低于全量微调,便于在资源受限设备上部署。
在 LasHeR 基准上 PR 提升 4.4%、SR 提升 3.3%,性能优于提示学习和其它基于适配器的方法。
推理速度达 28.60 FPS,能兼顾精度与效率,适合实际跟踪系统。
通过特征融合适配器和联合增强适配器整合并细化跨模态信息,不像以往方法受可见光模态主导。