基于个性化几何与纹理建模的少样本人体运动迁移
计算机视觉与模式识别
2021-03-29 v1 图形学
摘要
我们提出了一种用于少样本人体运动迁移的新方法,仅使用少量外观输入即可实现逼真的人体图像生成。尽管单人在体运动迁移近期取得进展,已有方法常需大量训练图像且训练耗时较长。一个很有前景的方向是少样本人体运动迁移,其仅需少量源图像进行外观迁移。然而,获得满意的迁移结果尤其具有挑战性。本文中,我们通过将人体纹理图渲染到个性化于源人物的表面几何(表示为 UV 图)来解决该问题。我们的几何生成器结合源图像的形状信息与来自 2D 关键点的姿态信息以合成个性化 UV 图。随后纹理生成器以源图像纹理为条件生成纹理图,以填补不可见部分。此外,我们可在测试时于纹理生成器的流形上用少量源图像微调纹理图,从而在不发生过拟合或伪影的情况下提升纹理图质量。大量实验表明,所提方法在定性与定量上均优于最先进方法。我们的代码见 https://github.com/HuangZhiChao95/FewShotMotionTransfer。
引用
@article{arxiv.2103.14338,
title = {Few-Shot Human Motion Transfer by Personalized Geometry and Texture Modeling},
author = {Zhichao Huang and Xintong Han and Jia Xu and Tong Zhang},
journal= {arXiv preprint arXiv:2103.14338},
year = {2021}
}
备注
CVPR 2021