FATE:基于单目视频的全头高斯头像及纹理编辑
计算机视觉与模式识别
2025-03-24 v2
摘要
从轻松获取的单目视频中重建可动画化的高保真3D头像是一项关键但极具挑战性的任务。尽管渲染性能和操控能力取得了显著进展,但仍面临 reconstruction不完整和高斯表示效率低下的诸多挑战。为此,我们引入FATE,一种从单个单目视频中构建可编辑的全头像的方法。FATE集成了基于抽样的稠密化策略,以确保点的optimal位置分布,提高了渲染效率。引入神经烘焙技术,将离散的高斯表示转换为连续的属性图,促进直观的外观编辑。此外,我们提出了通用的完成框架来恢复非正面视角的外观,最终构建一个可360度渲染的3D头像。FATE在定性和定量评估中均优于之前的方法,实现了最先进的性能。据我们所知,FATE是首个可动画化且支持360度全头单目重建方法,用于3D头像。
引用
@article{arxiv.2411.15604,
title = {FATE: Full-head Gaussian Avatar with Textural Editing from Monocular Video},
author = {Jiawei Zhang and Zijian Wu and Zhiyang Liang and Yicheng Gong and Dongfang Hu and Yao Yao and Xun Cao and Hao Zhu},
journal= {arXiv preprint arXiv:2411.15604},
year = {2025}
}
备注
Accepted by CVPR2025