AniArtAvatar：基于单张图像的可动画 3D 艺术头像
计算机视觉与模式识别
2024-03-27 v1
摘要
我们提出了一种新方法，用于从单张图像生成可控 facial expressions（面部表情）、head poses（头部姿态）和 shoulder movements（肩部动作）的可动画 3D 感知艺术头像。不同于之前的再现方法，我们的方法利用视角条件 2D 扩散模型，从单张具有中性表情的艺术肖像合成多视角图像。利用生成的颜色和法线，我们使用基于 SDF 的神经表面合成静态头像。对于头像动画，我们提取控制点，通过这些点传递运动并对隐式标准空间进行变形。首先，我们渲染头像的前视图，提取 2D 特征点，并通过训练好的 SDF 网络将其投影到 3D 空间。我们使用 3DMM 提取 3D 驱动特征点，并将运动传递到头像特征点。为了动画化头像姿态，我们手动设置身体高度，并用两个笼子限制头像的头部和躯干。头部和躯干可以通过变换这两个笼子来实现动画。我们的做法是一个一次性管道，可应用于各种风格。实验表明，我们的方法能够生成所需控制下不同运动的高质量 3D 艺术头像。
引用
@article{arxiv.2403.17631,
title = {AniArtAvatar: Animatable 3D Art Avatar from a Single Image},
author = {Shaoxu Li},
journal= {arXiv preprint arXiv:2403.17631},
year = {2024}
}