中文

OPD:单视图3D可开启部件检测

计算机视觉与模式识别 2022-03-31 v1

摘要

我们解决如下任务:预测物体的哪些部分可以开启以及开启时如何运动。输入为物体的单张图像,输出为检测物体哪些部分可开启,以及描述每个可开启部件关节运动的运动参数。为应对该任务,我们创建了两个3D物体数据集:基于现有合成物体的OPDSynth,以及基于真实物体RGBD重建的OPDReal。随后我们设计了OPDRCNN,一种检测可开启部件并预测其运动参数的神经架构。实验表明这是一项具挑战性的任务,尤其在跨物体类别泛化以及单图像信息有限时。我们的架构优于基线及已有工作,尤其在RGB图像输入下。简短视频摘要见 https://www.youtube.com/watch?v=P85iCaD0rfc

关键词

引用

@article{arxiv.2203.16421,
  title  = {OPD: Single-view 3D Openable Part Detection},
  author = {Hanxiao Jiang and Yongsen Mao and Manolis Savva and Angel X. Chang},
  journal= {arXiv preprint arXiv:2203.16421},
  year   = {2022}
}