3D语义子空间遍历器：赋予3D生成模型形状编辑能力
计算机视觉与模式识别
2023-08-17 v4
摘要
形状生成是指生成各种表示的3D形状以用于3D内容创作。以往关于3D形状生成的研究侧重于形状质量与结构，未充分考虑或较少考虑语义信息的重要性。因此，此类生成模型往往无法在生成过程中保持形状结构的语义一致性，或无法对形状的语义属性进行操控。本文提出一种名为3D语义子空间遍历器（3D Semantic Subspace Traverser）的新型语义生成模型，利用语义属性进行特定类别的3D形状生成与编辑。我们的方法采用隐式函数作为3D形状表示，并结合一种新颖的潜空间GAN与线性子空间模型，以在3D形状的局部潜空间中发现语义维度。子空间的每个维度对应一个特定的语义属性，我们可以通过遍历这些维度的系数来编辑生成形状的属性。实验结果表明，我们的方法能够生成具有复杂结构的合理形状，并支持语义属性的编辑。代码与训练好的模型可在 https://github.com/TrepangCat/3D_Semantic_Subspace_Traverser 获取。
引用
@article{arxiv.2307.14051,
title = {3D Semantic Subspace Traverser: Empowering 3D Generative Model with Shape Editing Capability},
author = {Ruowei Wang and Yu Liu and Pei Su and Jianwei Zhang and Qijun Zhao},
journal= {arXiv preprint arXiv:2307.14051},
year = {2023}
}
备注
Published in ICCV 2023. Code: https://github.com/TrepangCat/3D_Semantic_Subspace_Traverser