分层时空图融合模型

自适应图注意力

该模型采用渐进式自适应图特征捕获策略,从粗到细地构建所有人体关节的全局到局部注意力图特征,并融合时空注意力以建模长期时序依赖,缓解深度歧义问题。

Lijun, Zhang · 陆峰 · Kangkang, Zhou · 周祥东 · 石玉

IEEE Signal Processing Letters 2023

技术优势

特征更丰富

渐进式自适应图特征捕获策略从粗到细地构建所有人体关节的全局到局部注意力图特征,增强空间语义表示。

缓解深度歧义

时空注意力融合模块捕获相关帧的时间注意力因子并用于中间监督关节深度,建模长期时序依赖,从而缓解深度歧义。

应用场景