SketchFaceGS：基于高斯溅写的实时草图驱动人脸编辑与生成
图形学
2026-04-22 v1 计算机视觉与模式识别
摘要
3D高斯表示已成为数字头模型的强大范式，实现了具有实时渲染的照片级质量。然而，直观且交互式地创建或编辑3D高斯头部模型仍具挑战性。虽然2D草图为快速直观概念设计提供了理想的交互方式，但其稀疏、深度模糊且缺乏高频细节，使得在实时约束下从笔画推断稠密几何一致的3D高斯结构仍具困难。为此，我们提出SketchFaceGS，首个针对2D草图实现3D高斯头部模型的实时生成与编辑框架。该方法采用feed-forward、粗到细的架构：Transformer-based UV特征预测模块首先从输入草图重建粗糙但几何一致的UV特征图，然后3D UV特征增强模块以高频、照片级细节对其进行精细化，生成高保真度3D头部。对于编辑，我们引入UV掩码融合技术结合逐层特征融合策略，实现精确、实时、自由视点的修改。广泛实验表明，SketchFaceGS在生成保真度和编辑灵活性方面均优于现有方法，能够在单次前向传递中从草图生成高质量、可编辑的3D头部。
引用
@article{arxiv.2604.19202,
title = {SketchFaceGS: Real-Time Sketch-Driven Face Editing and Generation with Gaussian Splatting},
author = {Bo Li and Jiahao Kang and Yubo Ma and Feng-Lin Liu and Bin Liu and Fang-Lue Zhang and Lin Gao},
journal= {arXiv preprint arXiv:2604.19202},
year = {2026}
}
备注
Accepted to CVPR 2026 as a Highlight. Jittor implementation: https://github.com/gogoneural/SketchFaceGS_jittor. (C) 2026 IEEE. Personal use of this material is permitted