PEGASUS:具有可组合属性的个性化生成式 3D 化身
计算机视觉与模式识别
2024-04-03 v2
摘要
我们提出了 PEGASUS,一种从单目视频源构建个性化生成式 3D 人脸化身的方法。我们的生成式 3D 化身支持解耦控制,可选择性地改变面部属性(例如头发或鼻子),同时保留身份特征。我们的方法包含两个阶段:合成数据库生成和构建个性化生成式化身。我们生成了具有不同面部属性的目标身份合成视频集合,其中视频通过借用不同身份的单目视频中的属性来合成。随后,我们构建了一个特定于人的生成式 3D 化身,能够在保留其身份的同时连续修改其属性。通过大量实验,我们证明了这种生成合成数据库并创建 3D 生成式化身的方法在保持身份的同时实现了高真实感,是最有效的。此后,我们引入了一种零样本方法,通过利用先前构建的个性化生成模型,更高效地实现相同的生成式建模目标。
引用
@article{arxiv.2402.10636,
title = {PEGASUS: Personalized Generative 3D Avatars with Composable Attributes},
author = {Hyunsoo Cha and Byungjun Kim and Hanbyul Joo},
journal= {arXiv preprint arXiv:2402.10636},
year = {2024}
}
备注
Accepted at CVPR 2024, Project Page: https://snuvclab.github.io/pegasus/