Ray3D: 基于射线的单目绝对三维人体姿态估计与定位
计算机视觉与模式识别
2022-10-28 v3
摘要
本文提出一种新颖的基于单目射线三维(Ray3D)的绝对人体姿态估计方法,使用标定相机。从单目二维姿态输入进行准确且可泛化的绝对三维人体姿态估计是一个不适定问题。为应对该挑战,我们将输入从像素空间转换为三维归一化射线。该转换使我们的方法对相机内参变化具有鲁棒性。为处理真实场景中相机外参变化,Ray3D显式地将相机外参作为输入,并联合建模三维姿态射线与相机外参之间的分布。这一新颖的网络设计是Ray3D方法卓越泛化能力的关键。为深入理解相机内参与外参变化如何影响绝对三维关键点定位精度,我们在三个单人三维基准以及一个合成基准上进行了深入系统的实验。这些实验表明我们的方法显著优于现有的最先进模型。我们的代码与合成数据集可在 https://github.com/YxZhxn/Ray3D 获取。
引用
@article{arxiv.2203.11471,
title = {Ray3D: ray-based 3D human pose estimation for monocular absolute 3D localization},
author = {Yu Zhan and Fenghai Li and Renliang Weng and Wongun Choi},
journal= {arXiv preprint arXiv:2203.11471},
year = {2022}
}
备注
Accepted by CVPR 2022