单阶段多人姿态机
计算机视觉与模式识别
2019-08-27 v1
摘要
多人姿态估计是一个具有挑战性的问题。现有方法大多基于两阶段——一阶段用于候选框生成,另一阶段用于将姿态分配给对应的人。然而,此类两阶段方法通常效率低下。本工作中,我们提出首个单阶段模型,即单阶段多人姿态机(SPM),以简化流程并提升多人姿态估计的效率。为此,我们提出一种新颖的结构化姿态表示(SPR),统一了人体实例与身体关节位置表示。基于SPR,我们开发了SPM模型,可在单阶段直接预测多人的结构化姿态,从而相比两阶段方法提供更紧凑的流程和显著的效率优势。具体而言,SPR引入根关节以指示不同人体实例,身体关节位置被编码为相对于根关节的位移。为更好地预测某些关节的长程位移,SPR进一步扩展为层次化表示。基于SPR,SPM可通过CNN同时预测根关节(实例位置)与身体关节位移,从而高效完成多人姿态估计。此外,为证明SPM的通用性,我们将其应用于多人3D姿态估计。在MPII、扩展PASCAL-Person-Part、MSCOCO和CMU Panoptic等基准上的综合实验清楚地证明了SPM在多人2D/3D姿态估计方面的最先进效率以及出色的精度。
引用
@article{arxiv.1908.09220,
title = {Single-Stage Multi-Person Pose Machines},
author = {Xuecheng Nie and Jianfeng Zhang and Shuicheng Yan and Jiashi Feng},
journal= {arXiv preprint arXiv:1908.09220},
year = {2019}
}
备注
To appear in ICCV 2019