用于人体重纹理化的法向引导服装 UV 预测
计算机视觉与模式识别
2023-03-14 v1
摘要
衣物会发生复杂的几何形变，从而导致外观变化。为以物理合理的方式编辑人体视频，纹理映射不仅必须考虑由身体运动和服装贴合引起的衣物变换，还须考虑其 3D 细粒度表面几何。然而，这带来了从图像或视频中 3D 重建动态衣物的新挑战。本文中，我们展示无需 3D 重建即可编辑着装人体图像与视频。我们估计图像中服装区域与纹理空间（即 UV 映射）之间的几何感知纹理映射。我们的 UV 映射通过利用从图像预测出的 3D 表面法向，设计为相对于底层 3D 表面保持等距。我们的方法以自监督方式捕获服装底层几何，无需 UV 映射的 ground truth 标注，并可轻松扩展至预测时间一致的 UV 映射。我们证明，在真实与合成数据上，我们的方法均优于 SOTA 人体 UV 映射估计方法。
引用
@article{arxiv.2303.06504,
title = {Normal-guided Garment UV Prediction for Human Re-texturing},
author = {Yasamin Jafarian and Tuanfeng Y. Wang and Duygu Ceylan and Jimei Yang and Nathan Carr and Yi Zhou and Hyun Soo Park},
journal= {arXiv preprint arXiv:2303.06504},
year = {2023}
}