用于点云中实例与语义联合分割的双向注意力
计算机视觉与模式识别
2020-03-12 v1
摘要
点云中的实例分割是理解三维场景最精细的方式之一。由于实例分割与语义分割密切相关，许多工作同时处理这两项任务并利用多任务学习的优势。然而，其中大多数仅考虑了诸如逐元素特征融合之类的简单策略，这可能无法带来相互促进。在本工作中，我们在骨干神经网络上构建了一个用于三维点云感知的双向注意力模块，该模块利用从一个任务的特征所度量的相似度矩阵来帮助为另一任务聚合非局部信息，从而避免潜在的特征排斥与任务冲突。在 S3DIS 数据集和 PartNet 数据集上的综合实验与消融研究验证了我们方法的优越性。此外，还分析了双向注意力模块如何助力联合实例与语义分割的机制。
引用
@article{arxiv.2003.05420,
title = {Bi-Directional Attention for Joint Instance and Semantic Segmentation in Point Clouds},
author = {Guangnan Wu and Zhiyi Pan and Peng Jiang and Changhe Tu},
journal= {arXiv preprint arXiv:2003.05420},
year = {2020}
}