IDE-3D：面向高分辨率三维感知人像合成的交互式解耦编辑
计算机视觉与模式识别
2022-06-01 v1
摘要
现有的三维感知人脸生成方法在质量与可编辑性之间面临困境：它们要么生成低分辨率的可编辑结果，要么生成高质量但无编辑灵活性的结果。本工作中，我们提出一种新方法，将两方面优势结合在一起。我们的系统由三个主要组件构成：（1）一个三维语义感知生成模型，可生成视角一致、解耦的人脸图像与语义掩码；（2）一种混合GAN反演方法，从语义与纹理编码器初始化潜码，并进一步优化以实现忠实重建；（3）一个规范编辑器，可在规范视角下高效操控语义掩码并生成高质量编辑结果。我们的方法适用于诸多应用，例如自由视角人脸绘制、编辑与风格控制。定量与定性结果均表明，我们的方法在真实感、保真度与效率方面达到了最先进水平（state-of-the-art）。
引用
@article{arxiv.2205.15517,
title = {IDE-3D: Interactive Disentangled Editing for High-Resolution 3D-aware Portrait Synthesis},
author = {Jingxiang Sun and Xuan Wang and Yichun Shi and Lizhen Wang and Jue Wang and Yebin Liu},
journal= {arXiv preprint arXiv:2205.15517},
year = {2022}
}
备注
Project Page: https://mrtornado24.github.io/IDE-3D/