命名那个部件：3D 部件分割与命名

我们解决语义 3D 部件分割问题：将对象分解为具有有意义名称的部件。虽然存在带有部件注释的数据集，但其定义在数据集之间不一致，限制了稳健训练。以前的方法要么产生无标记的分解，要么检索单个部件而不完整地标注形状。我们提出 ALIGN-Parts，将部件命名建模为直接的集合对齐任务。该方法将形状分解为部件块——隐式 3D 部件表示——通过二分匹配方式与部件描述匹配。我们结合来自 3D 部件场的几何线索、来自多视角视觉特征的外观线索以及来自语言模型生成的 affordance 描述的语义知识。文本对齐损失确保部件块与文本共享嵌入空间，从而实现理论上的开放词汇匹配设置，给定足够数据。我们的方法高效且新颖，实现一次性 3D 部件分割和命名，具有多个下游任务的应用，包括作为可扩展的标注引擎。由于我们的模型支持对任意描述进行零-shot 匹配以及对已知类别的置信度校准预测，并结合人工验证，我们创建了一个统一的本体，使 PartNet、3DCoMPaT++ 和 Find3D 对齐，包含 1,794 个唯一 3D 部件。我们引入两个适用于命名 3D 部件分割任务的新指标。我们还展示了来自我们新创建的 TexParts 数据集的示例。