中文

FlashAvatar:基于高效高斯嵌入的高保真头部虚拟人

计算机视觉与模式识别 2024-04-01 v2 图形学

摘要

我们提出了 FlashAvatar,一种新颖且轻量级的 3D 可动画虚拟人表示,它能够在几分钟内从短单目视频序列中重建数字虚拟人,并在消费级 GPU 上以 300FPS 渲染高保真照片级真实感图像。为了实现这一点,我们在参数化人脸模型表面嵌入并维护一个均匀的 3D 高斯场,并学习额外的空间偏移以对非表面区域和细微的面部细节进行建模。充分利用几何先验可以捕捉高频面部细节并保留夸张的表情,而适当的初始化有助于减少高斯数量,从而实现超快的渲染速度。大量实验结果表明,FlashAvatar 在视觉质量和个性化细节方面优于现有工作,且渲染速度几乎快一个数量级。项目页面:https://ustc3dv.github.io/FlashAvatar/

关键词

引用

@article{arxiv.2312.02214,
  title  = {FlashAvatar: High-fidelity Head Avatar with Efficient Gaussian Embedding},
  author = {Jun Xiang and Xuan Gao and Yudong Guo and Juyong Zhang},
  journal= {arXiv preprint arXiv:2312.02214},
  year   = {2024}
}

备注

Project page: https://ustc3dv.github.io/FlashAvatar/