EMDB：野外环境下全局三维人体姿态与形体的电磁数据库
计算机视觉与模式识别
2023-09-01 v1
摘要
我们提出 EMDB，即野外环境下的电磁全局三维人体姿态与形体数据库。EMDB 是一个新颖的数据集，包含高质量的 3D SMPL 姿态与形体参数，以及针对野外视频的全局身体与相机轨迹。我们使用穿戴式无线电磁（EM）传感器和手持 iPhone，共记录了 58 分钟的运动数据，分布于 81 个室内外序列和 10 名参与者。除精确的身体姿态与形体外，我们还提供了全局相机姿态和身体根轨迹。为构建 EMDB，我们提出了一种多阶段优化流程，首先将对 SMPL 拟合到 6-DoF EM 测量值，然后通过图像观测细化姿态。为获得高质量结果，我们利用神经隐式化身模型重建精细的人体表面几何与外观，从而通过稠密像素级目标实现改进的配准与平滑。我们使用多视角体积捕获系统进行的评估表明，EMDB 具有 2.3 cm 位置误差和 10.6 度角度误差的预期精度，超越了先前野外数据集的精度。我们在 EMDB 上评估了现有的最先进单目 RGB 方法用于相机相对及全局姿态估计。EMDB 公开可用：https://ait.ethz.ch/emdb
引用
@article{arxiv.2308.16894,
title = {EMDB: The Electromagnetic Database of Global 3D Human Pose and Shape in the Wild},
author = {Manuel Kaufmann and Jie Song and Chen Guo and Kaiyue Shen and Tianjian Jiang and Chengcheng Tang and Juan Zarate and Otmar Hilliges},
journal= {arXiv preprint arXiv:2308.16894},
year = {2023}
}
备注
Accepted to ICCV 2023