基于无监督层次解缠排表示学习的可解释单视图 3D 高斯溅射
计算机视觉与模式识别
2025-04-08 v1
摘要
高斯溅射 (GS) 近期在 3D 重建中取得了显著进展,实现了快速渲染和高质量效果。然而,现有 3DGS 方法在理解底层 3D 语义方面存在挑战,限制了模型的可控性和可解释性。为此,我们提出一种可解释的单视图 3DGS 框架,称为 3DisGS,通过层次解缠排表示学习 (DRL) 发现粗粒度和细粒度的 3D 语义。具体而言,模型采用双分支架构,包含点云初始化分支和三平面-高斯生成分支,以分离 3D 几何和视觉外观特征,实现粗粒度解缠排。随后,通过基于 DRL 的编码器-适配器进一步发现每个模态中的细粒度语义表示。就我们知识而言,这是首个实现无监督可解释 3DGS 的工作。评估结果表明,我们的模型在保持高质量和快速重建的同时,实现了 3D 解缠排。
引用
@article{arxiv.2504.04190,
title = {Interpretable Single-View 3D Gaussian Splatting using Unsupervised Hierarchical Disentangled Representation Learning},
author = {Yuyang Zhang and Baao Xie and Hu Zhu and Qi Wang and Huanting Guo and Xin Jin and Wenjun Zeng},
journal= {arXiv preprint arXiv:2504.04190},
year = {2025}
}