PAniC-3D：基于动漫角色肖像的风格化单视图三维重建
计算机视觉与模式识别
2023-03-28 v1
摘要
我们提出PAniC-3D，一个直接从动漫（ani）角色肖像（p）插图（c）重建风格化三维角色头部的系统。我们的动漫风格领域对单视图重建提出了独特挑战；与自然的人头照片相比，角色肖像插图具有更复杂多样的几何头发与饰物，并采用非真实感轮廓线着色。此外，缺乏适用于训练和评估这一模糊风格化重建任务的3D模型与肖像插图数据。面对这些挑战，我们提出的PAniC-3D架构通过线填充模型跨越插图到3D的领域鸿沟，并以体素辐射场表示复杂几何。我们使用两个大型新数据集（11.2k Vroid 3D模型，1k Vtuber肖像插图）训练系统，并在全新的AnimeRecon插图到3D配对基准上评估。PAniC-3D显著优于基线方法，并为确立从肖像插图进行风格化重建的任务提供了数据。
引用
@article{arxiv.2303.14587,
title = {PAniC-3D: Stylized Single-view 3D Reconstruction from Portraits of Anime Characters},
author = {Shuhong Chen and Kevin Zhang and Yichun Shi and Heng Wang and Yiheng Zhu and Guoxian Song and Sizhe An and Janus Kristjansson and Xiao Yang and Matthias Zwicker},
journal= {arXiv preprint arXiv:2303.14587},
year = {2023}
}
备注
CVPR 2023, code release: https://github.com/ShuhongChen/panic3d-anime-reconstruction