Pomo3D：三维感知人像配饰及更多
计算机视觉与模式识别
2024-09-24 v1 人工智能
摘要
我们提出了 Pomo3D，这是一个三维人像处理框架，通过对人像和配饰进行分解与重组来实现自由配饰。它使虚拟形象能够获得同时佩戴多种配饰的分布外外观。现有方法在提供这种显式且细粒度的编辑方面仍然存在困难；它们要么无法在给定的人像上生成额外物体，要么在生成配饰时导致人像发生改变（例如，身份偏移）。这种限制带来了显著的障碍，因为人们通常希望在虚拟世界中利用多样且时尚的配饰来创造迷人的外观。我们的方法为这一较少被关注的问题提供了有效的解决方案。我们进一步引入了 Scribble2Accessories 模块，使 Pomo3D 能够根据用户绘制的配饰涂鸦图创建三维配饰。此外，我们设计了一个感知偏置的映射器，以减轻现实世界数据集中存在的偏置关联。除了上述对象级操作外，Pomo3D 还提供了对人像的广泛编辑选项，包括几何和纹理的全局或局部编辑以及虚拟形象风格化，将神经人像的三维编辑提升到了更全面的水平。
引用
@article{arxiv.2409.14430,
title = {Pomo3D: 3D-Aware Portrait Accessorizing and More},
author = {Tzu-Chieh Liu and Chih-Ting Liu and Shao-Yi Chien},
journal= {arXiv preprint arXiv:2409.14430},
year = {2024}
}