HOI检测框架

少样本高效迁移

从CLIP提取先验知识，通过交互解码器和知识集成块实现更准确的人-物对检测，性能优于现有方法。

Shan, Ning · Longtian, Qiu · Liu, Yongfei · 何旭明

2023

参数信息

mAP增益

4.04

技术优势

少样本也能打

无需大规模训练数据即可从CLIP迁移知识，缓解数据稀缺问题。

精度大幅领先

在HICO-Det上比现有最优方法高出4.04 mAP，优势显著。

应用场景

• 可穿戴医疗：识别人体动作与物品交互，辅助健康监测。
• 具身智能：让智能体理解人与物的交互，提升环境感知。
• 工业机器人：检测工人与工具/机器的交互，优化流程与安全。