中文

RPVNet:一种用于激光雷达点云分割的深度高效距离-点-体素融合网络

计算机视觉与模式识别 2021-03-25 v1

摘要

点云可以用许多形式(视图)表示,典型的有基于点的集合、基于体素的栅格或基于距离的图像(即全景视图)。基于点的视图几何精确,但无序,难以高效寻找局部邻域。基于体素的视图规则但稀疏,且当体素分辨率提高时计算量立方增长。基于距离的视图规则且通常稠密,然而球面投影使物理维度失真。基于体素和基于距离的视图都存在量化损失,尤其体素在面对大规模场景时。为在细粒度分割任务中利用不同视图优势并缓解各自缺陷,我们提出一种新颖的距离-点-体素融合网络,即 RPVNet。该网络中,我们设计了深度融合框架,在这三种视图间进行多重且互信息的交互,并提出门控融合模块(称 GFM),可基于并发输入自适应合并三种特征。此外,所提 RPV 交互机制高效,我们将其总结为更一般的公式。借助该高效交互与相对较低的体素分辨率,我们的方法也被证明更高效。最后,我们在两个大规模数据集 SemanticKITTI 和 nuScenes 上评估所提模型,其在两者上均展现 SOTA 性能。注意,我们的方法目前在 SemanticKITTI 排行榜上排名第 1,无需任何额外技巧。

关键词

引用

@article{arxiv.2103.12978,
  title  = {RPVNet: A Deep and Efficient Range-Point-Voxel Fusion Network for LiDAR Point Cloud Segmentation},
  author = {Jianyun Xu and Ruixiang Zhang and Jian Dou and Yushi Zhu and Jie Sun and Shiliang Pu},
  journal= {arXiv preprint arXiv:2103.12978},
  year   = {2021}
}