Control4D：基于文本的高效 4D 肖像编辑
计算机视觉与模式识别
2023-12-01 v2
摘要
我们提出 Control4D，一个利用文本指令编辑动态 4D 肖像的创新框架。我们的方法解决了 4D 编辑中普遍存在的挑战，特别是现有 4D 表示的高效性不足以及基于扩散的编辑器导致的不一致编辑效果。我们首先提出 GaussianPlanes，一种新颖的 4D 表示，通过在三维空间和时间上应用基于平面的分解，使 Gaussian Splatting 更具结构性。这增强了 4D 编辑的效率与鲁棒性。此外，我们提出利用一个 4D 生成器，从基于扩散的编辑器生成的不一致编辑图像中学习更连续的生成空间，有效提升了 4D 编辑的一致性与质量。综合评估证明了 Control4D 的优越性，包括在 4D 肖像编辑中显著减少的训练时间、高质量渲染以及时空一致性。我们的项目网站链接为 https://control4darxiv.github.io。
引用
@article{arxiv.2305.20082,
title = {Control4D: Efficient 4D Portrait Editing with Text},
author = {Ruizhi Shao and Jingxiang Sun and Cheng Peng and Zerong Zheng and Boyao Zhou and Hongwen Zhang and Yebin Liu},
journal= {arXiv preprint arXiv:2305.20082},
year = {2023}
}
备注
The link to our project website is https://control4darxiv.github.io