中文

面向多人姿态估计的联合坐标回归与关联:一种纯神经网络方法

计算机视觉与模式识别 2024-04-22 v2 机器学习

摘要

我们提出一种新颖的单阶段端到端多人 2D 姿态估计算法,称为联合坐标回归与关联(JCRA),其在无需任何后处理的情况下生成人体姿态关节点与关联关系。所提算法快速、准确、有效且简洁。单阶段端到端网络架构显著提升了 JCRA 的推理速度。同时,我们为编码器与解码器设计了对称网络结构,确保关键点识别的高精度。其采用通过 transformer 网络直接输出部位位置的架构,带来性能的显著提升。在 MS COCO 与 CrowdPose 基准上的大量实验表明,JCRA 在精度与效率上均优于当前最优方法。此外,JCRA 取得 69.2 mAP,且推理加速比先前最优自底向上算法快 78%。该算法代码将公开可用。

关键词

引用

@article{arxiv.2307.01004,
  title  = {Joint Coordinate Regression and Association For Multi-Person Pose Estimation, A Pure Neural Network Approach},
  author = {Dongyang Yu and Yunshi Xie and Wangpeng An and Li Zhang and Yufeng Yao},
  journal= {arXiv preprint arXiv:2307.01004},
  year   = {2024}
}

备注

This paper has been accepted by MMasia 2023 and is an oral presentation