多目标RSVP融合网络

眼动融合解码更准

引入眼动模态并采用动态重加权融合策略，显著提升多类目标RSVP解码的平衡准确率。

Xujin, Li · Wei, Wei · Kun, Zhao · Mao, Jiayu · Yizhuo, Lu · 邱爽 · Huiguang, He

Information Fusion 2025

参数信息

平衡准确率提升

5.4 %

平衡准确率提升

3.32 %

技术优势

能同时检测多类目标

创新性引入眼动模态，有效区分相似ERP，在检测目标存在的同时识别具体类别。

融合策略能动态调权重

根据理论推导的模态贡献比动态调整融合权重，实现更有效的多模态融合。

误差比现有系统少

通过层级自蒸馏模块在两级分类器间传递知识，减少非目标样本的误判。

应用场景

• 脑机接口：同时检测多类目标并识别类别，提升复杂BCI任务效率。
• 多模态融合：利用眼动数据强化EEG特征，提升相似ERP区分能力。
• 目标检测：在RSVP应用中实现多种类目标检测，支持实际场景。