视觉-知识融合模型

医学报告生成

该模型通过自动构建领域知识图谱和知识注意力机制,显著提升了医学图像报告的生成质量。

Xu D. · Huashi, Zhu · Huang Y. · Zhi, Jin · Ding W. · Li, Hang · Menglong, Ran

Information Fusion 2023

技术优势

自动构建图谱

无需人工构建,直接从医学标准自动生成领域知识图谱,节省大量人工成本。

可跨领域复用

模型在两种不同疾病数据集上均表现优异,展示出在不同疾病和语言间的泛化能力。

提供解释性

模型具备可解释性,有助于医生理解和信任生成的报告。

应用场景