SmartPortraits：用于状态估计、重建与合成的深度赋能手持智能手机人体肖像数据集
计算机视觉与模式识别
2022-04-22 v1
摘要
我们提出了一个由手持智能手机配合外部高质量深度相机在真实且不受控条件下记录的1000段人体肖像视频序列的数据集。所收集的数据集包含200名在不同姿态和地点被拍摄的人，其主要目的是弥合智能手机获得的原始测量值与下游应用（如状态估计、3D重建、视图合成等）之间的差距。数据收集所使用的传感器为智能手机的相机和惯性测量单元（IMU），以及外部Azure Kinect DK深度相机，该相机以亚毫秒精度与智能手机系统软件同步。录制过程中，使用智能手机闪光灯提供周期性的辅助光源。提供了最前方人物的准确掩码及其对相机对齐精度的影响。为评估目的，我们使用动作捕捉系统比较了多种最先进的相机对齐方法。我们提供了一个用于肖像捕捉的智能手机视觉-惯性基准，报告了多种方法的结果，并倡导在视图合成和3D重建任务中进一步使用数据集中提供的轨迹。
引用
@article{arxiv.2204.10211,
title = {SmartPortraits: Depth Powered Handheld Smartphone Dataset of Human Portraits for State Estimation, Reconstruction and Synthesis},
author = {Anastasiia Kornilova and Marsel Faizullin and Konstantin Pakulev and Andrey Sadkov and Denis Kukushkin and Azat Akhmetyanov and Timur Akhtyamov and Hekmat Taherinejad and Gonzalo Ferrer},
journal= {arXiv preprint arXiv:2204.10211},
year = {2022}
}
备注
Accepted to CVPR'2022