知识协同跟踪网络

模态缺失仍稳健

能同时利用多模态互补信息并补偿缺失模态，实现完整与不完整数据下的高性能目标跟踪。

He, Yuhang · Ma, Zhiheng · 魏行 · 龚怡宏

IEEE Transactions on Circuits and Systems for Video Technology 2024

技术优势

模态缺失也能跟踪

模态补偿机制使跟踪器在仅有单模态数据时仍能保持高性能，避免因模态缺失导致跟踪失败。

超过现有最先进跟踪器

在四个大规模 RGB-T 和 RGB-D 基准上超越了当前最先进的多模态跟踪器。

应用场景

• 具身智能：让机器人在传感器受损或模态缺失时仍能稳定跟踪目标，提升实际部署可靠性。
• 群体机器人：在群体协同中处理单个机器人模态缺失的情况，保持整体跟踪性能。
• 先进机器人：为先进机器人提供鲁棒的目标跟踪能力，适应复杂多变的传感条件。
• 物联网与传感网：在传感器网络数据不完整的情况下维持目标跟踪，减少对完整模态数据的依赖。