事件特征提取器

退化条件下稳健跟踪

通过增强时空交互和区分状态变化来提取事件数据中的运动线索,并自适应融合帧与事件两种模态的优势,可作为即插即用模块提升现有跟踪器在运动模糊和高动态范围等场景下的性能。

Zhang, Jiqing · Dong, Bo · Fu, Yingkai · Yuanchen, Wang · 魏小鹏 · 尹宝才 · 杨鑫

International Journal of Computer Vision 2023

技术优势

提升退化条件鲁棒性

事件数据对运动模糊和高动态范围不敏感,融合后跟踪器在这些场景下不再失效。

即插即用,无需改结构

模块可以作为即插即用组件轻松应用于现成的帧基跟踪器,无需重新设计网络。

自适应融合两大模态

特征整合器平衡帧与事件的贡献,根据场景自动调整权重,充分利用互补性。

多数据集验证泛化性

在EED、VisEvent和自采的FE141数据集上验证了八个扩展跟踪器,证明方法通用。

应用场景