中文

MIGS:基于张量分解的多身份高斯光谱

计算机视觉与模式识别 2024-07-18 v2

摘要

我们提出了 MIGS(Multi-Identity Gaussian Splatting),这是一种新方法,通过仅使用单目视频学习多个身份的单一神经表示。最近的 3D 高斯光谱(3DGS)用于人类头像的方法需要针对每个身份进行优化。然而,学习多身份表示在对不受约束姿态下动画人类方面具有显著优势。我们提出构建一种结合所有训练身份可学习 3DGS 参数的高阶张量。通过假设低秩结构并对张量进行分解,我们在统一的网络中建模多个主体的复杂刚性和非刚性变形,从而显著减少总参数数量。我们的方法利用所有训练身份的信息,能够在挑战性的未见姿态下实现稳健的动画,超越现有方法。该方法还可以扩展以学习未见身份。

关键词

引用

@article{arxiv.2407.07284,
  title  = {MIGS: Multi-Identity Gaussian Splatting via Tensor Decomposition},
  author = {Aggelina Chatziagapi and Grigorios G. Chrysos and Dimitris Samaras},
  journal= {arXiv preprint arXiv:2407.07284},
  year   = {2024}
}

备注

Accepted by ECCV 2024. Project page: https://aggelinacha.github.io/MIGS/