深度空间先验计数网络

零样本跨类计数

结合文本指令与空间先验,对任意类别物体进行精确定位与计数,无需类别专属训练。

Jinyong, Chen · Li, Qilei · 高明亮 · Zhai, Wenzhe · Jeon, Gwanggil · Camacho, David

Information Fusion 2024

技术优势

定位更准

利用Grounding DINO的空间感知能力,将空间位置作为先验融入计数网络,使其更关注物体的精确位置,从而提升定位精度。

跨模态对齐

通过元适配器将文本信息提取为对象查询,作为跨模态匹配的指令,对齐不同模态的特征空间,同时保持判别性。

应用场景