PhyGenHOI：面向动态人体-物体交互的物理感知4D生成
计算机视觉与模式识别
2026-05-29 v1 人工智能
摘要
我们聚焦于生成符合物理规律且视觉真实的4维人体-物体交互（HOI）。给定以3D高斯溢射（3DGS）表示的静态人体和目标物体，旨在合成人体主动通过如拳击或踢踏等动作与物体进行交互的动态场景。为此，我们提出PhyGenHOI框架，构建性地将生成式人体运动与显式物理物体仿真耦合。我们将人体建模为由运动扩散模型（MDM）驱动的语义智能体，将物体建模为通过物料点方法（MPM）仿真的物理智能体，利用3D高斯作为统一的可微分表示。我们通过三种耦合机制实现相互监督：（1）窗口吸引损失在时间上同步生成式运动以拦截物体；（2）接触驱动的重新仿真步骤在碰撞时触发物理一致的动量传递；（3）掩码视频-SDS目标注入视频先验以增强接触保真度。实验表明，PhyGenHOI能够在多样化的动作、人体和物体配置下生成一致的物理4D HOI，显著优于基线方法。项目页面和视频：https://omerbenishu.github.io/PhyGenHOI/
引用
@article{arxiv.2605.30268,
title = {PhyGenHOI: Physically-Aware 4D Generation of Dynamic Human-Object Interactions},
author = {Omer Benishu and Gal Fiebelman and Sagie Benaim},
journal= {arXiv preprint arXiv:2605.30268},
year = {2026}
}