LADIS:面向三维形状编辑的语言解耦
计算机视觉与模式识别
2022-12-12 v1 计算与语言
摘要
自然语言交互是使三维形状设计平民化的一个有前景的方向。然而,现有的文本驱动三维形状编辑方法在产生解耦的、局部的编辑方面面临挑战。我们通过学习将语言锚定于三维几何上的解耦潜在表示来解决此问题。为此,我们提出了一套互补工具,包括一种新颖的网络架构、一个解耦损失和一种新的编辑流程。此外,为衡量编辑局部性,我们定义了一种称为部件级编辑精度(part-wise edit precision)的新指标。我们表明,我们的方法在编辑局部性上比现有SOTA方法高出20%,在语言指代表达解析准确率上最高高出6.6%。我们的工作表明,仅通过解耦语言表示,下游三维形状编辑就能变得更局限于相关部件,即使模型从未被给予显式的基于部件的监督。
引用
@article{arxiv.2212.05011,
title = {LADIS: Language Disentanglement for 3D Shape Editing},
author = {Ian Huang and Panos Achlioptas and Tianyi Zhang and Sergey Tulyakov and Minhyuk Sung and Leonidas Guibas},
journal= {arXiv preprint arXiv:2212.05011},
year = {2022}
}