中文

RaBit:基于拓扑一致数据集的参数化双足卡通角色 3D 建模

计算机视觉与模式识别 2023-03-27 v2

摘要

协助人们高效生成视觉上合理的 3D 角色一直是计算机视觉与计算机图形学中的基础研究课题。近期的基于学习的方法在 3D 真实人体数字化领域取得了前所未有的精度与效率。然而,已有工作均未聚焦于 3D 双足卡通角色的建模,而此类角色在游戏与影视中同样需求巨大。本文中,我们引入首个大规模 3D 双足卡通角色数据集 3DBiCar,以及相应的参数化模型 RaBit。我们的数据集包含由专业美术师手工制作的 1500 个拓扑一致的高质量 3D 带纹理模型。基于该数据,RaBit 被设计为具有类 SMPL 的线性混合形状模型与基于 StyleGAN 的神经 UV 纹理生成器,可同时表达形状、姿态与纹理。为证明 3DBiCar 与 RaBit 的实用性,我们开展了单视图重建、基于草图的建模及 3D 卡通动画等多种应用。在单视图重建设定下,我们发现从输入图像到输出基于 UV 的纹理图的直接全局映射容易丢失某些局部细节(如鼻子、耳朵)。因此,我们采用部件敏感纹理推理器以感知所有重要局部区域。实验进一步从定性与定量上证明了方法的有效性。3DBiCar 与 RaBit 可在 gaplab.cuhk.edu.cn/projects/RaBit 获取。

关键词

引用

@article{arxiv.2303.12564,
  title  = {RaBit: Parametric Modeling of 3D Biped Cartoon Characters with a Topological-consistent Dataset},
  author = {Zhongjin Luo and Shengcai Cai and Jinguo Dong and Ruibo Ming and Liangdong Qiu and Xiaohang Zhan and Xiaoguang Han},
  journal= {arXiv preprint arXiv:2303.12564},
  year   = {2023}
}

备注

CVPR 2023, Project page: https://gaplab.cuhk.edu.cn/projects/RaBit/