层次图交叉推理网络

群体活动识别新突破

设计了一种基于层次图的交叉推理网络,能够同时捕获人体区域和个体之间的时空依赖,实现端到端的群体活动识别,无需个体动作标签即可训练,显著降低标注成本。

Yan, Rui · Xie, Lingxi · 唐金辉 · 舒祥波 · Tian, Qi

IEEE Transactions on Pattern Analysis and Machine Intelligence 2023

技术优势

无需个体动作标签

训练时不需要提供个体动作标签,因此可以省去逐人标注的工作,直接端到端学习。

三层信息联合推理

同时构建并推理身体区域、个体和群体活动三个层次的信息,能够捕捉多层次视觉线索。

交叉推理模块

提出通用的交叉推理模块,能够同时捕获身体区域和个体之间的时空依赖。

应用场景