Amodal3R：从遮挡二维图像进行无遮挡三维重建
计算机视觉与模式识别
2025-03-18 v1
摘要
大多数基于图像的三维目标重建模型假设目标完全可见，忽略了现实场景中常见的遮挡问题。本文引入Amodal3R，一个条件三维生成模型，旨�从部分观察中重建三维目标。我们基于“基础”三维生成模型进行扩展，以从遮挡目标中恢复合理的三维几何与外观。我们提出一种掩码加权多头交叉注意力机制，随后引入遮挡感知注意力层，显式利用遮挡先验指导重建过程。我们展示了，仅通过训练合成数据，Amodal3R能够在真实场景中恢复完整三维目标，遮挡情况不在娓善。它显著优于现有方法，后者分别独立执行二维无遮挡完成后再进行三维重建，从而建立了遮挡感知三维重建的新基准。
引用
@article{arxiv.2503.13439,
title = {Amodal3R: Amodal 3D Reconstruction from Occluded 2D Images},
author = {Tianhao Wu and Chuanxia Zheng and Frank Guan and Andrea Vedaldi and Tat-Jen Cham},
journal= {arXiv preprint arXiv:2503.13439},
year = {2025}
}
备注
Project Page: https://sm0kywu.github.io/Amodal3R/