UltraGlove:基于 MEMS 超声波传感器的手部姿态估计
计算机视觉与模式识别
2023-09-18 v2 图形学
人机交互
机器人学
摘要
手部追踪是人机交互的重要方面,并在扩展现实设备中具有广泛应用。然而,当前的手部运动捕捉方法存在各种局限。例如,基于视觉的手部姿态估计易受自遮挡与光照条件变化影响,而基于 IMU 的追踪手套存在显著漂移且不耐外部磁场干扰。为解决这些问题,我们提出一种新颖且低成本的手部追踪手套,其利用附着于手指的若干 MEMS-超声波传感器来测量传感器间距离矩阵。我们的轻量深度网络随后从该距离矩阵重建手部姿态。实验结果表明,该方法准确、与尺寸无关且对外部干扰鲁棒。我们还展示了传感器选择、传感器配置、电路图以及模型架构的设计逻辑。
引用
@article{arxiv.2306.12652,
title = {UltraGlove: Hand Pose Estimation with Mems-Ultrasonic Sensors},
author = {Qiang Zhang and Yuanqiao Lin and Yubin Lin and Szymon Rusinkiewicz},
journal= {arXiv preprint arXiv:2306.12652},
year = {2023}
}