中文

H3O:基于异构监督的超高效 3D 占据预测

计算机视觉与模式识别 2025-03-07 v1

摘要

3D 占据预测最近作为一种全新的 3D 场景理解范式出现,并为自动驾驶中的下游规划提供了有价值的信息。然而,大多数现有方法计算代价高昂,需要昂贵的基于注意力的 2D-3D 变换和 3D 特征处理。在本文中,我们提出了一种新的 3D 占据预测方法 H3O,其特点是采用高度高效的架构设计,与当前最先进方法相比计算成本显著降低。此外,为了弥补真实 3D 占据标签中的模糊性,我们主张利用辅助任务来补充直接的 3D 监督。具体而言,我们通过可微分体积渲染集成多相机深度估计、语义分割和表面法线估计,由对应的 2D 标签监督,从而引入丰富且异构的监督信号。我们在 Occ3D-nuScenes 和 SemanticKITTI 基准上进行了大量实验,证明了所提出的 H3O 的优越性。

关键词

引用

@article{arxiv.2503.04059,
  title  = {H3O: Hyper-Efficient 3D Occupancy Prediction with Heterogeneous Supervision},
  author = {Yunxiao Shi and Hong Cai and Amin Ansari and Fatih Porikli},
  journal= {arXiv preprint arXiv:2503.04059},
  year   = {2025}
}

备注

ICRA 2025