中文

GraFormer:用于三维姿态估计的图卷积Transformer

计算机视觉与模式识别 2021-09-20 v1

摘要

利用2D关节之间的关系在2D到3D姿态估计中起着至关重要的作用,但仍未充分发展。为缓解此问题,我们提出GraFormer,一种结合图卷积用于3D姿态估计的新型transformer架构。所提出的GraFormer包含两个重复堆叠的核心模块,GraAttention和ChebGConv块。GraAttention使所有2D关节在全局感受野中交互而不削弱关节的图结构信息,这为后续模块引入了重要特征。与仅建模关节表观关系的普通图卷积不同,ChebGConv块使2D关节在高阶球面上交互,从而构建其隐藏的隐式关系。我们通过在流行基准上进行大量实验实证展示了GraFormer的优越性。具体而言,GraFormer在Human3.6M数据集上以18%的参数优于SOTA。代码可在https://github.com/Graformer/GraFormer获取。

关键词

引用

@article{arxiv.2109.08364,
  title  = {GraFormer: Graph Convolution Transformer for 3D Pose Estimation},
  author = {Weixi Zhao and Yunjie Tian and Qixiang Ye and Jianbin Jiao and Weiqiang Wang},
  journal= {arXiv preprint arXiv:2109.08364},
  year   = {2021}
}

备注

9 pages, 6 figures