局部注意网络

细粒度场景关系

利用局部上下文注意力提升细粒度场景图生成性能。

Zhu, Xuhan · 王瑞平 · Lan, Xiangyuan · Wang, Yaowei

Pattern Recognition 2024

技术优势

感知更精细

细粒度位置注意力网络（FLAN）通过全局和局部分支关注局部信息，根据不同区域自适应地增强细粒度位置的学习。

标注更可靠

细粒度位置标签迁移（FLLT）方法识别与局部上下文不一致的粗粒度标签，并通过全局置信度阈值策略将其迁移为可靠的细粒度标签。

应用场景

• 场景理解：提升细粒度场景图生成性能，使机器能更准确地理解场景中的对象及其关系。
• 视觉关系检测：通过局部上下文学习，更精确地识别视觉关系，减少全局视角下的感知模糊。
• 多模态感知：结合局部上下文和全局信息，提升多模态感知任务中的细粒度理解能力。