HOReeNet:三维感知的手-物抓取重演
计算机视觉与模式识别
2022-11-14 v1 人工智能
摘要
我们提出HOReeNet,其解决了涉及手、物体及其交互的图像处理新任务。特别地,我们感兴趣于将源图像中的物体迁移至目标图像,并操控三维手部姿态以紧密抓取被迁移的物体。此外,该操控需反映在二维图像空间中。在我们涉及手-物交互的重演场景中,三维重建变得至关重要,因为需要实现手与物体间的三维接触推理以达到紧密抓取。同时,为从三维空间获得高质量二维图像,需要精心设计的3D到2D投影与图像细化。我们的HOReeNet是为此类任务提出的首个全可微框架。在手-物交互数据集上,我们将HOReeNet与传统的图像翻译算法及重演算法进行比较。我们展示了我们的方法在所提任务上达到了最先进水平。
引用
@article{arxiv.2211.06195,
title = {HOReeNet: 3D-aware Hand-Object Grasping Reenactment},
author = {Changhwa Lee and Junuk Cha and Hansol Lee and Seongyeong Lee and Donguk Kim and Seungryul Baek},
journal= {arXiv preprint arXiv:2211.06195},
year = {2022}
}
备注
5 pages, 5 figures