FIP：通过融合 Flex 与惯性传感器为日常服装赋予稳健的动作捕捉能力
人机交互
2025-02-24 v1
摘要
我们的衣服能否准确捕捉我们的身体动作？本文引入 Flexible Inertial Poser（FIP），一种新颖的动作捕捉系统，使用日常服装配备两个肘部附着的 Flex 传感器和四个惯性测量单元（IMU）。为了解决松散可穿戴设备中不可避免的传感器位移问题，这些位移会显著降低关节跟踪精度，我们识别了 Flex 和惯性传感器位移的独特特征，开发了基于这些观察结果的位移潜在扩散模型和基于物理的校准器，以补偿传感器位移，从而显著提高动作捕捉精度。我们还引入了 Pose Fusion Predictor 来增强多模态传感器融合。广泛的实验表明，我们的方法在不同身体形状和动作下表现稳健，显著优于 SOTA IMU 方法，在角度误差上提高 19.5%，在肘部角度误差上提高 26.4%，在位置误差上提高 30.1%。FIP 为 ubiquitous human-computer interactions 和诸如元宇宙、康复和健身分析等多样化的交互应用开辟了可能性。
引用
@article{arxiv.2502.15058,
title = {FIP: Endowing Robust Motion Capture on Daily Garment by Fusing Flex and Inertial Sensors},
author = {Jiawei Fang and Ruonan Zheng and Yuanyao and Xiaoxia Gao and Chengxu Zuo and Shihui Guo and Yiyue Luo},
journal= {arXiv preprint arXiv:2502.15058},
year = {2025}
}
备注
18 figures, 15 pages, ACM CHI accepted paper