中文

GaussianCut:基于图割的3D高斯泼溅交互式分割

计算机视觉与模式识别 2024-11-13 v1

摘要

我们介绍GaussianCut,一种新的交互式多视图分割方法,用于表示为3D高斯的场景。我们的方法允许通过与单个视图交互来选择要分割的对象。它接受直观的用户输入,如点点击、粗略涂鸦或文本。使用3D高斯泼溅(3DGS)作为底层场景表示简化了感兴趣对象的提取,这些对象被视为场景高斯的一个子集。我们的关键思想是将场景表示为图,并使用图割算法最小化能量函数,以有效地将高斯分割为前景和背景。为此,我们基于场景高斯构建图,并在图上设计一个分割对齐的能量函数,以将用户输入与场景属性结合。为了获得初始粗略分割,我们利用2D图像/视频分割模型,并通过我们的图构建进一步细化这些粗略估计。我们的实证评估显示了GaussianCut在各种场景中的适应性。GaussianCut在3D分割方面取得了与最先进方法竞争的性能,无需任何额外的分割感知训练。

关键词

引用

@article{arxiv.2411.07555,
  title  = {GaussianCut: Interactive segmentation via graph cut for 3D Gaussian Splatting},
  author = {Umangi Jain and Ashkan Mirzaei and Igor Gilitschenski},
  journal= {arXiv preprint arXiv:2411.07555},
  year   = {2024}
}