中文

AvatarPerfect:基于用户辅助的 3D 高斯溅射头像精细化与自动姿态建议

人机交互 2024-12-23 v1

摘要

从单目视频创建高质量的 3D 头像有助于虚拟现实和远程通信应用。然而,现有自动方法在新姿态下会产生细节问题,由于输入视频信息有限。我们提出了 AvatarPerfect,一种新颖的系统,允许用户通过手动编辑渲染的头像图像来迭代细化 3DGS 头像。在每次迭代中,系统会建议新的身体姿态和相机姿态,以帮助用户识别并纠正细节。随后,编辑后的图像用于更新当前头像,并建议下一套身体姿态和相机姿态进行进一步细化。为评估 AvatarPerfect 的效果,我们进行了用户研究,比较了我们的方法与现有的 3DGS 编辑器 SuperSplat 后者允许直接操作高斯而无自动姿态建议。结果表明,我们的系统使用户能够获得高于现有 3DGS 编辑器的更高质量细化后的 3DGS 头像。

关键词

引用

@article{arxiv.2412.15609,
  title  = {AvatarPerfect: User-Assisted 3D Gaussian Splatting Avatar Refinement with Automatic Pose Suggestion},
  author = {Jotaro Sakamiya and I-Chao Shen and Jinsong Zhang and Mustafa Doga Dogan and Takeo Igarashi},
  journal= {arXiv preprint arXiv:2412.15609},
  year   = {2024}
}

备注

13 pages