多语义图解码模型

自然图像语义解码

利用图神经网络捕捉语义类别间的共现关系,提升自然图像脑活动解码的准确率。

李蓉 · Li, Jiyi · 王翀 · 刘涛 · Wang, Xuyang · Zou, Ting · Huang Wei · 颜红梅 · 陈华富

International Journal of Neural Systems 2024

技术优势

准确率更高

图神经网络模型在52个语义类别上的解码准确率高于其他深度神经网络模型,表明利用类别间关系能更好地区分语义信息。

利用共现关系

模型显式建模语义类别间的共现概率,且该共现概率与解码准确率显著相关,验证了利用类别间关系的有效性。

符合层级处理

结果显示语义内容以层级方式组织,较高视觉区域与内部视觉体验更密切相关,模型设计契合视觉系统的层级处理机制。

应用场景