GaussianStyle: 基于StyleGAN的高斯头部虚拟化身
计算机视觉与模式识别
2024-08-21 v3
摘要
现有方法如神经辐射场(NeRF)和三维高斯泼溅(3DGS)在面部属性控制(如面部动画和组件编辑)方面取得了显著进展,但在动态头部建模的细粒度表示和可扩展性方面仍存在困难。为解决这些局限,我们提出GaussianStyle,一种新颖框架,将3DGS的体积优势与StyleGAN的强大隐式表示相结合。GaussianStyle使用高斯点保留结构信息(如表情和姿态),同时将隐式体积表示投影到StyleGAN中,以捕获高频细节并缓解神经纹理渲染中常见的过度平滑。实验结果表明,我们的方法在重演、新视角合成和动画方面达到了最先进的性能。
引用
@article{arxiv.2402.00827,
title = {GaussianStyle: Gaussian Head Avatar via StyleGAN},
author = {Pinxin Liu and Luchuan Song and Daoan Zhang and Hang Hua and Yunlong Tang and Huaijin Tu and Jiebo Luo and Chenliang Xu},
journal= {arXiv preprint arXiv:2402.00827},
year = {2024}
}
备注
demo page and code to be updated soon