接触矩阵:通过精确交互建模增强舞蹈动作合成
计算机视觉与模式识别
2026-05-07 v1
摘要
生成逼真的反应性动作(即一人对他人固定动作做出反应)由于严格的交互约束和有限的可行解空间而极具挑战性。本文聚焦于一个典型场景:双人舞,该场景高质量数据稀缺,动作模式复杂,且人体交互细节既繁复又丰富。为应对这些挑战,我们提出了一种新颖的两阶段框架。在第一阶段,我们引入了带有独立身体部位编码器和联合解码器的运动 VQ-VAE,利用专用码本增强表示能力,同时在解码过程中动态建模身体部位间的依赖关系,从而防止生成动作中的不一致性。在第二阶段,我们提出了一种用于反应性动作生成的接触感知扩散模型,该模型联合生成动作与个体间的接触矩阵,实现了显式的交互建模,并在采样过程中提供向更精确、受约束的交互动力学演化的指导。实验表明,我们的方法优于 Duolando,取得了更低的 (8.89 vs. 25.30)和 (8.01 vs. 9.97),以及更高的 BED(0.4606 vs. 0.2858),表明交互保真度与节奏同步性均有所提升。
引用
@article{arxiv.2605.04662,
title = {Contact Matrix: Enhancing Dance Motion Synthesis with Precise Interaction Modeling},
author = {Xuhai Chen and Zhi Cen and Huaijin Pi and Sida Peng and Xiaowei Zhou and Yong Liu},
journal= {arXiv preprint arXiv:2605.04662},
year = {2026}
}