自然图像语义解码
利用图神经网络捕捉语义类别间的共现关系,提升自然图像脑活动解码的准确率。
李蓉 · Li, Jiyi · 王翀 · 刘涛 · Wang, Xuyang · Zou, Ting · Huang Wei · 颜红梅 · 陈华富
International Journal of Neural Systems 2024
图神经网络模型在52个语义类别上的解码准确率高于其他深度神经网络模型,表明利用类别间关系能更好地区分语义信息。
模型显式建模语义类别间的共现概率,且该共现概率与解码准确率显著相关,验证了利用类别间关系的有效性。
结果显示语义内容以层级方式组织,较高视觉区域与内部视觉体验更密切相关,模型设计契合视觉系统的层级处理机制。