SiCloPe：基于轮廓的着衣人体建模
计算机视觉与模式识别
2019-04-11 v2
摘要
我们引入了一种基于轮廓的新表示，用于使用深度生成模型对着衣人体进行建模。我们的方法可以从单张输入图像重建穿着衣服的人的完整且有纹理的 3D 模型。受视觉外壳算法启发，我们的隐式表示利用身体姿态的 2D 轮廓和 3D 关节来描述着衣人体巨大的形状复杂性与变化。给定一个人的分割 2D 轮廓以及从输入图像推断出的其 3D 关节，我们首先围绕该主体从新视点合成一致的轮廓。与输入分割最一致的合成轮廓被送入深度视觉外壳算法以进行鲁棒的 3D 形状预测。然后，我们利用正面图像和分割掩码作为条件生成对抗网络的输入，推断该主体后视图的纹理。我们的实验表明，我们基于轮廓的模型是一种有效的表示，并且后视图的外观可以使用图像到图像翻译网络可靠地预测。虽然基于参数化模型的经典方法常常在具有挑战性衣着的主体单视图图像上失败，我们的方法仍能产生成功的结果，可与从多视图输入获得的结果相媲美。
引用
@article{arxiv.1901.00049,
title = {SiCloPe: Silhouette-Based Clothed People},
author = {Ryota Natsume and Shunsuke Saito and Zeng Huang and Weikai Chen and Chongyang Ma and Hao Li and Shigeo Morishima},
journal= {arXiv preprint arXiv:1901.00049},
year = {2019}
}