DITTO:用于隐式 3D 重建的对偶与集成潜在拓扑
计算机视觉与模式识别
2024-06-26 v2
摘要
我们提出了一种名为对偶与集成潜在拓扑(简称 DITTO)的新概念,用于从噪声和稀疏点云中进行隐式 3D 重建。大多数现有方法主要专注于单一潜在类型,如点潜在或网格潜在。相比之下,所提出的 DITTO 利用了点潜在和网格潜在(即对偶潜在)以增强各自的优势:网格潜在的稳定性与点潜在的丰富细节能力。具体而言,DITTO 由对偶潜在编码器和集成隐式解码器组成。在对偶潜在编码器中,作为构成编码器关键模块块的对偶潜在层并行细化两种潜在表示,保持其独特的形状并实现递归交互。值得注意的是,对偶潜在层内新提出的动态稀疏点 Transformer 有效地细化了点潜在。随后,集成隐式解码器系统地组合这些细化后的潜在表示,实现了高保真度的 3D 重建,并在物体级和场景级数据集上超越了之前的最先进 (SOTA) 方法,特别是在薄壁和精细结构方面。
引用
@article{arxiv.2403.05005,
title = {DITTO: Dual and Integrated Latent Topologies for Implicit 3D Reconstruction},
author = {Jaehyeok Shim and Kyungdon Joo},
journal= {arXiv preprint arXiv:2403.05005},
year = {2024}
}
备注
Accepted by CVPR 2024