STMixer 动作检测器

单级稀疏检测

一种端到端的一阶段稀疏动作检测器,通过查询式自适应特征采样与解耦时空特征混合,在关键帧和动作管检测上均达到最先进性能。

Tao, Wu · Mengqi, Cao · Gao, Ziteng · 武港山 · 王利民

IEEE Transactions on Pattern Analysis and Machine Intelligence 2024

技术优势

无需多阶段训练

以单阶段方式同时完成动作实例的分类与定位,省去预训练人物检测器及分步微调。

特征采样不受框限制

查询式自适应特征采样可在整个时空域自适应挖掘一组判别性特征,而不是只从检测框内采样。

五榜夺魁

在五个具有挑战性的时空动作检测基准上刷新最优结果,覆盖关键帧检测和动作管检测两种任务。

应用场景