中文

HeadGaS:基于 3D 高斯泼溅的实时可动画化头部化身

计算机视觉与模式识别 2024-08-14 v2

摘要

过去几年,3D 头部动画在质量和运行速度上取得了重大进步,这尤其得益于可微渲染和神经辐射场的进展。实时渲染是现实世界应用中一个非常理想的目标。我们提出了 HeadGaS,这是一个利用 3D 高斯泼溅(3DGS)进行 3D 头部重建和动画的模型。在本文中,我们引入了一个混合模型,该模型通过一个可学习的潜在特征基扩展了显式的 3DGS 表示,这些潜在特征可以与来自参数化头部模型的低维参数进行线性混合,以获得依赖于表情的颜色和不透明度值。我们证明,HeadGaS 在实时推理帧率下提供了最先进的结果,其性能超越基线高达 2dB,同时将渲染速度提升了超过 10 倍。

关键词

引用

@article{arxiv.2312.02902,
  title  = {HeadGaS: Real-Time Animatable Head Avatars via 3D Gaussian Splatting},
  author = {Helisa Dhamo and Yinyu Nie and Arthur Moreau and Jifei Song and Richard Shaw and Yiren Zhou and Eduardo Pérez-Pellitero},
  journal= {arXiv preprint arXiv:2312.02902},
  year   = {2024}
}

备注

accepted to ECCV 2024