HeadGaS:基于 3D 高斯泼溅的实时可动画化头部化身
计算机视觉与模式识别
2024-08-14 v2
摘要
过去几年,3D 头部动画在质量和运行速度上取得了重大进步,这尤其得益于可微渲染和神经辐射场的进展。实时渲染是现实世界应用中一个非常理想的目标。我们提出了 HeadGaS,这是一个利用 3D 高斯泼溅(3DGS)进行 3D 头部重建和动画的模型。在本文中,我们引入了一个混合模型,该模型通过一个可学习的潜在特征基扩展了显式的 3DGS 表示,这些潜在特征可以与来自参数化头部模型的低维参数进行线性混合,以获得依赖于表情的颜色和不透明度值。我们证明,HeadGaS 在实时推理帧率下提供了最先进的结果,其性能超越基线高达 2dB,同时将渲染速度提升了超过 10 倍。
引用
@article{arxiv.2312.02902,
title = {HeadGaS: Real-Time Animatable Head Avatars via 3D Gaussian Splatting},
author = {Helisa Dhamo and Yinyu Nie and Arthur Moreau and Jifei Song and Richard Shaw and Yiren Zhou and Eduardo Pérez-Pellitero},
journal= {arXiv preprint arXiv:2312.02902},
year = {2024}
}
备注
accepted to ECCV 2024