中文

ContactGen:面向伴侣的接触引导式交互式3D人类生成

计算机视觉与模式识别 2024-02-06 v2

摘要

在人类之间各种交互(如目视接触和手势)中,通过接触产生的身体接触可以作为理解人类行为的关键时刻。受此启发,给定具有所需交互标签的3D伴侣人类,我们提出了一种以身体接触为目标的3D人类生成任务。不同于处理与静态物体或场景的交互,给定的伴侣人类可以根据交互类型具有多样化的姿态和不同的接触区域。为处理这一挑战,我们提出了一种新方法,基于引导扩散框架为给定伴侣人类生成交互式3D人类。具体而言,我们提出了一个接触预测模块,用于自适应估计两个输入人类之间根据交互标签可能的接触区域。利用估计的潜在接触区域作为补充指导,我们在引导扩散模型中动态地引导ContactGen为给定伴侣人类生成交互式3D人类。我们在CHI3D数据集上演示了ContactGen,该方法在与比较方法比较的情况下,生成了符合物理规律且多样化的姿态。

关键词

引用

@article{arxiv.2401.17212,
  title  = {ContactGen: Contact-Guided Interactive 3D Human Generation for Partners},
  author = {Dongjun Gu and Jaehyeok Shim and Jaehoon Jang and Changwoo Kang and Kyungdon Joo},
  journal= {arXiv preprint arXiv:2401.17212},
  year   = {2024}
}

备注

Accepted by AAAI 2024