联合脑电与眼动,动态对抗适配并利用对比学习抑制分布漂移与模态异质性。
朱旗 · Zhu, Ting · 费伦科 · Chuhang, Zheng · Shao, Wei · 张大鹏 · 张道强
IEEE Transactions on Affective Computing 2025
动态对抗域适应在训练时自动挑选相关源域,跨被试对齐分布,避免为每个新被试从头训练。
自注意力与交叉注意力同时捕获模态内和模态间情感特征,加上对比损失进一步拉近多模态高层语义,得到互补且鲁棒的表示。
在多个同时采集脑电和眼动的情绪数据集上均表现突出,说明方法不依赖单一数据分布。