异构图注意力网络

细粒度多模态鉴伪

基于异构图的图注意力网络,对音频和视频真假及其伪造类型进行细粒度分类,利用跨模态同步模式捕获互补信息,性能优于现有方法。

Yin, Qilin · 卢伟 · 操晓春 · 罗向阳 · 周怡聪 · 黄继武

International Journal of Computer Vision 2024

技术优势

细粒度识别伪造类型

能够区分视频、音频或两者同时伪造,提升检测的精准度。

利用跨模态同步

通过跨模态图交互模块利用音视频同步模式捕获互补信息。

保留异质性特征

去同质化图池化保持节点特征差异,增强图级表示。

应用场景