基于基元的 3D 人-物交互建模与编程
计算机视觉与模式识别
2023-12-19 v1
摘要
在 3D 中嵌入人-关节物体交互（HAOI）是深入理解人类活动的重要方向。与以往使用参数化模型和 CAD 模型表示人与物体的工作不同，在本工作中，我们提出一种新颖的基于 3D 几何基元的语言来同时编码人与物体。在我们的新范式下，人与物体均为基元的组合，而非异构实体。因此，可以在人类的有限 3D 数据与不同物体类别之间实现互信息学习。此外，考虑到表达的简洁性及其包含信息的丰富性，我们选择超二次曲面作为基元表示。为了探索 HAOI 在机器中的有效嵌入，我们构建了一个由基元及其图像组成的 3D HAOI 新基准，并提出一项要求机器利用基元从图像中恢复 3D HAOI 的任务。此外，我们提出了一个 HAOI 上的单视图 3D 重建基线。我们相信这种基于基元的 3D HAOI 表示将为 3D HAOI 研究铺平道路。我们的代码和数据可在 https://mvig-rhos.com/p3haoi 获取。
引用
@article{arxiv.2312.10714,
title = {Primitive-based 3D Human-Object Interaction Modelling and Programming},
author = {Siqi Liu and Yong-Lu Li and Zhou Fang and Xinpeng Liu and Yang You and Cewu Lu},
journal= {arXiv preprint arXiv:2312.10714},
year = {2023}
}
备注
AAAI2024