穿宽松衣物人体的姿态估计：利用高帧率相机与闪烁 LED 获取真实姿态
计算机视觉与模式识别
2022-12-12 v1
摘要
人体姿态估计，尤其是对运动员的估计，有助于提升其表现。然而，若受试者穿着滑雪/单板滑雪服等宽松衣物，使用现有方法（如人工标注）难以进行估计。本研究开发了一种获取穿宽松衣物人体二维（2D）姿态真值数据的方法。该方法使用快速刷新的发光二极管（LED）。受试者需穿宽松衣物并将 LED 置于目标关节处。通过选用轻薄膜状宽松衣物，相机可直接观测 LED。所提方法利用高帧率相机以 240 fps 捕获场景，并通过提取 LED 亮和灭的帧生成两段 30 fps 图像序列。考虑到人体运动速度，两段视频序列间的时间差可忽略。LED 亮视频用于人工标注关节从而获得真值数据。此外，相当于标准 30 fps 视频的 LED 灭视频，用于确认现有基于机器学习的方法与人工标注的准确性。实验表明，所提方法可获取标准 RGB 视频的真值数据。进一步揭示，无论是人工标注还是最先进的姿态估计器都未能获得目标关节的正确位置。
引用
@article{arxiv.2212.04820,
title = {Pose Estimation for Human Wearing Loose-Fitting Clothes: Obtaining Ground Truth Posture Using HFR Camera and Blinking LEDs},
author = {Takayoshi Yamaguchi and Dan Mikami and Seiji Matsumura and Naoki Saijo and Makio Kashino},
journal= {arXiv preprint arXiv:2212.04820},
year = {2022}
}
备注
Extended abstract of WACV2023 workshop on Computer Vision 4 Winter Sports