基于稠密几何交互感知的皮肤运动重定向
计算机视觉与模式识别
2025-01-17 v2 图形学
摘要
捕捉和维护不同身体部位之间的几何交互对于在皮肤角色中实现成功的运动重定向至关重要。现有方法常忽视身体几何或在骨骼运动重定向后添加几何校正阶段，导致骨骼交互与几何校正之间存在冲突，引发抖动、穿透和接触不匹配等问题。为解决这些挑战，我们引入一个新的重定向框架 MeshRet，直接建模运动重定向中的稠密几何交互。首先，我们使用语义一致传感器 (SCS) 在角色之间建立稠密网格对应关系，该方法能有效应用于多样化的网格拓扑结构。随后，我们开发一种新型时空表示称为稠密网格交互 (DMI) 场的概念。该场由一组交互式 SCS 特征向量构成，巧妙地捕捉了身体几何之间的接触和非接触交互。通过在重定向期间对齐 DMI 场，MeshRet 不仅保留了运动语义，还防止了自我穿透，确保接触保持。大量实验在公开的 Mixamo 数据集和我们新收集的 ScanRet 数据集上进行，证明 MeshRet 实现了最先进的性能。代码已公开：https://github.com/abcyzj/MeshRet
引用
@article{arxiv.2410.20986,
title = {Skinned Motion Retargeting with Dense Geometric Interaction Perception},
author = {Zijie Ye and Jia-Wei Liu and Jia Jia and Shikun Sun and Mike Zheng Shou},
journal= {arXiv preprint arXiv:2410.20986},
year = {2025}
}
备注
NeurIPS 2024 Spotlight