多模态精准分类
一种融合OCT与眼底图像的双流注意神经网络，以高精度评估轻度认知障碍。
潘志庚 · 李洪 · Lau, Joseph Tak Fai · Shen, Meixiao
Computers in Biology and Medicine 2023
通过自注意力和交叉注意力模块在每层卷积中融合OCT与眼底图像特征，捕捉单模态容易遗漏的互补信息。
分类无需使用视神经头形态特征，避免了对图像中特定解剖结构的依赖，提升了模型对不同成像质量的鲁棒性。
双流网络产生多个输出损失并集成多分类器，增强了特征利用和梯度回传，最终精确率达到84.96%。