中文

CPF:学习接触势场以建模手-物体交互

计算机视觉与模式识别 2021-09-14 v4

摘要

建模手-物体(HO)交互不仅需要估计 HO 姿态,还需关注因交互而产生的接触。利用深度学习方法分别估计手和物体已取得显著进展,但同步的 HO 姿态估计与接触建模尚未被充分探索。本文提出一种显式接触表示,即接触势场(Contact Potential Field, CPF),以及一种学习-拟合混合框架 MIHO,用于建模手与物体的交互(Modeling the Interaction of Hand and Object)。在 CPF 中,我们将每一对接触中的 HO 顶点视为弹簧-质量系统。因此整个系统在抓握位置形成具有最小弹性势能的势场。在两个常用基准上的大量实验表明,我们的方法在多个重建指标上达到了最先进水平(state-of-the-art),并且即使真值存在严重的相互穿透或分离,也能生成物理上更合理的 HO 姿态。我们的代码已发布于 https://github.com/lixiny/CPF。

关键词

引用

@article{arxiv.2012.00924,
  title  = {CPF: Learning a Contact Potential Field to Model the Hand-Object Interaction},
  author = {Lixin Yang and Xinyu Zhan and Kailin Li and Wenqiang Xu and Jiefeng Li and Cewu Lu},
  journal= {arXiv preprint arXiv:2012.00924},
  year   = {2021}
}

备注

ICCV 2021, (reduce PDF file size)