零样本跨类计数
结合文本指令与空间先验,对任意类别物体进行精确定位与计数,无需类别专属训练。
Jinyong, Chen · Li, Qilei · 高明亮 · Zhai, Wenzhe · Jeon, Gwanggil · Camacho, David
Information Fusion 2024
利用Grounding DINO的空间感知能力,将空间位置作为先验融入计数网络,使其更关注物体的精确位置,从而提升定位精度。
通过元适配器将文本信息提取为对象查询,作为跨模态匹配的指令,对齐不同模态的特征空间,同时保持判别性。