中文

GaussianStyle: 基于StyleGAN的高斯头部虚拟化身

计算机视觉与模式识别 2024-08-21 v3

摘要

现有方法如神经辐射场(NeRF)和三维高斯泼溅(3DGS)在面部属性控制(如面部动画和组件编辑)方面取得了显著进展,但在动态头部建模的细粒度表示和可扩展性方面仍存在困难。为解决这些局限,我们提出GaussianStyle,一种新颖框架,将3DGS的体积优势与StyleGAN的强大隐式表示相结合。GaussianStyle使用高斯点保留结构信息(如表情和姿态),同时将隐式体积表示投影到StyleGAN中,以捕获高频细节并缓解神经纹理渲染中常见的过度平滑。实验结果表明,我们的方法在重演、新视角合成和动画方面达到了最先进的性能。

关键词

引用

@article{arxiv.2402.00827,
  title  = {GaussianStyle: Gaussian Head Avatar via StyleGAN},
  author = {Pinxin Liu and Luchuan Song and Daoan Zhang and Hang Hua and Yunlong Tang and Huaijin Tu and Jiebo Luo and Chenliang Xu},
  journal= {arXiv preprint arXiv:2402.00827},
  year   = {2024}
}

备注

demo page and code to be updated soon