Total-Editing：具备可编辑外观、动作与光照的头部化身
计算机视觉与模式识别
2025-05-28 v1
摘要
人脸重现和肖像重光照是肖像编辑中的基本任务，但它们通常是独立处理的，缺乏协同作用。大多数人脸重现方法优先考虑运动控制和多视角一致性，而肖像重光照则侧重于调整阴影效果。为了利用几何一致性和光照感知的双重优势，我们提出了Total-Editing，一个统一的肖像编辑框架，能够精确控制外观、动作和光照。具体来说，我们设计了一个具有内在分解能力的神经辐射场解码器。这使得来自肖像图像或HDR环境图的光照信息能够无缝集成到合成肖像中。我们还引入了一个基于移动最小二乘的形变场，以增强化身动作和阴影效果的时空一致性。凭借这些创新，我们的统一框架显著提高了肖像编辑结果的质量和真实感。此外，Total-Editing的多源特性支持更灵活的应用，例如从一个肖像到另一个肖像的光照迁移，或具有自定义背景的肖像动画。
引用
@article{arxiv.2505.20582,
title = {Total-Editing: Head Avatar with Editable Appearance, Motion, and Lighting},
author = {Yizhou Zhao and Chunjiang Liu and Haoyu Chen and Bhiksha Raj and Min Xu and Tadas Baltrusaitis and Mitch Rundle and HsiangTao Wu and Kamran Ghasedi},
journal= {arXiv preprint arXiv:2505.20582},
year = {2025}
}