细微肌肉运动可信识别
通过运动放大与关键点注意力建模,精准捕捉面部微表情的动态变化,避免无关身份特征干扰。
吴发林 · Yu, Xia · Boyi, Ma · Tianyang, Hu · Jingyao, Yang · Haoxin, Li · Huang, Di
IEEE Transactions on Affective Computing 2024
利用关键点注意力机制关注与微表情相关的面部标志点,学习关键点之间的关系,减少视频放大带来的无关特征和身份信息的干扰。
ST-MEMM 网络对微表情视频中的细微运动进行增强,使不可察觉的面部肌肉运动变得可见,便于后续识别。
在 CASME II 和 SAMM 数据集上均取得最高识别准确率,优于现有最先进方法。
消融实验验证了所提网络中各组件的有效性,表明设计稳健。