SketchMetaFace：一种用于高保真 3D 角色人脸建模的基于学习的草图界面
计算机视觉与模式识别
2023-07-06 v2 图形学
人机交互
摘要
建模 3D 虚拟形象有益于 AR/VR、游戏和影视等多种应用场景。角色人脸作为虚拟形象的重要组成部分，带来了显著的多样性和生动性。然而，构建 3D 角色人脸模型通常需要繁重的工作量以及商业工具，即便对经验丰富的艺术家也是如此。各种现有的基于草图的工具无法支持业余用户建模多样的面部形状和丰富的几何细节。本文中，我们提出 SketchMetaFace——一个面向业余用户、可在数分钟内建模高保真 3D 人脸的草图系统。我们精心设计了用户界面与底层算法。首先，采用曲率感知笔触以更好地支持雕刻面部细节的可控性。其次，考虑到将 2D 草图映射至 3D 模型这一关键问题，我们开发了一种称为“隐式与深度引导网格建模”（IDGMM）的新型基于学习的方法。它融合了网格、隐式和深度表示的优点，以高效率实现高质量结果。此外，为进一步支持易用性，我们提出了由粗到细的 2D 草图界面设计和数据驱动的笔触建议工具。用户研究表明，我们的系统在易用性和结果视觉质量方面优于现有建模工具。实验分析也显示 IDGMM 在精度与效率间取得了更好的权衡。SketchMetaFace 可在 https://zhongjinluo.github.io/SketchMetaFace/ 获取。
引用
@article{arxiv.2307.00804,
title = {SketchMetaFace: A Learning-based Sketching Interface for High-fidelity 3D Character Face Modeling},
author = {Zhongjin Luo and Dong Du and Heming Zhu and Yizhou Yu and Hongbo Fu and Xiaoguang Han},
journal= {arXiv preprint arXiv:2307.00804},
year = {2023}
}