OPD:单视图3D可开启部件检测
计算机视觉与模式识别
2022-03-31 v1
摘要
我们解决如下任务:预测物体的哪些部分可以开启以及开启时如何运动。输入为物体的单张图像,输出为检测物体哪些部分可开启,以及描述每个可开启部件关节运动的运动参数。为应对该任务,我们创建了两个3D物体数据集:基于现有合成物体的OPDSynth,以及基于真实物体RGBD重建的OPDReal。随后我们设计了OPDRCNN,一种检测可开启部件并预测其运动参数的神经架构。实验表明这是一项具挑战性的任务,尤其在跨物体类别泛化以及单图像信息有限时。我们的架构优于基线及已有工作,尤其在RGB图像输入下。简短视频摘要见 https://www.youtube.com/watch?v=P85iCaD0rfc
引用
@article{arxiv.2203.16421,
title = {OPD: Single-view 3D Openable Part Detection},
author = {Hanxiao Jiang and Yongsen Mao and Manolis Savva and Angel X. Chang},
journal= {arXiv preprint arXiv:2203.16421},
year = {2022}
}