细粒度实体理解网络

弱监督下精确定位

通过分解短语语义与生成反事实增强,在无区域标注条件下实现更稳健的短语定位与实体理解。

Pengyue, Lin · Li, Ruifan · 冯方向 · Lun, Ke · Ma, Zhanyu · 王小捷

Pattern Recognition 2026

技术优势

能判断对象是否存在

引入事实性评估,通过检测头判断目标对象是否出现在图像中,避免无效定位。

对改写更稳健

利用多模态大模型自动生成改写样本,通过对比学习增强模型对改写表达的泛化能力。

能识别反事实描述

使用自动生成的反事实样本训练模型,使其能识别与图像不符的描述,提升事实一致性。

应用场景