注意力运动放大微表情识别网络

细微肌肉运动可信识别

通过运动放大与关键点注意力建模,精准捕捉面部微表情的动态变化,避免无关身份特征干扰。

吴发林 · Yu, Xia · Boyi, Ma · Tianyang, Hu · Jingyao, Yang · Haoxin, Li · Huang, Di

IEEE Transactions on Affective Computing 2024

技术优势

抑制身份干扰

利用关键点注意力机制关注与微表情相关的面部标志点,学习关键点之间的关系,减少视频放大带来的无关特征和身份信息的干扰。

放大微弱运动

ST-MEMM 网络对微表情视频中的细微运动进行增强,使不可察觉的面部肌肉运动变得可见,便于后续识别。

准确率领先

在 CASME II 和 SAMM 数据集上均取得最高识别准确率,优于现有最先进方法。

组件可靠性高

消融实验验证了所提网络中各组件的有效性,表明设计稳健。

应用场景