多适配器融合跟踪模型

轻量跨模态

通过特征融合与协同增强,在保持轻量化的同时显著提升可见光-热红外跟踪的准确性与效率。

Hu, Xue · 朱浩 · Ran, Zhidan · 唐贤伦 · Qi, Guanqiu · 朱智勤 · Kuok, Sin Chi · Henry, Leung

IEEE Transactions on Circuits and Systems for Video Technology 2025

参数信息

可训练参数
0.23 M
PR 提升
4.4 %
SR 提升
3.3 %
推理速度
28.60 FPS

技术优势

参数极少

只引入 0.23M 可训练参数,远低于全量微调,便于在资源受限设备上部署。

精度提升

在 LasHeR 基准上 PR 提升 4.4%、SR 提升 3.3%,性能优于提示学习和其它基于适配器的方法。

实时运行

推理速度达 28.60 FPS,能兼顾精度与效率,适合实际跟踪系统。

模态平衡

通过特征融合适配器和联合增强适配器整合并细化跨模态信息,不像以往方法受可见光模态主导。

应用场景