移动头戴式显示器上的实时第一人称手势识别
计算机视觉与模式识别
2017-12-15 v1
摘要
移动虚拟现实(VR)头戴式显示器(HMD)近年来在消费者中流行。本工作中,我们展示了在移动 HMD 上的实时第一人称手部手势检测与定位。我们的主要贡献为:1)一种自动标注边界框与手势标签的新型混合现实数据收集工具;2)迄今最大的第一人称手部手势与边界框数据集,含超过 400,000 标注帧;3)一个在现代移动 CPU 上实时运行、并在 8 类手势识别上取得高于 76% 精度的神经网络。
引用
@article{arxiv.1712.04961,
title = {Real-time Egocentric Gesture Recognition on Mobile Head Mounted Displays},
author = {Rohit Pandey and Marie White and Pavel Pidlypenskyi and Xue Wang and Christine Kaeser-Chen},
journal= {arXiv preprint arXiv:1712.04961},
year = {2017}
}
备注
Extended Abstract NIPS 2017 Machine Learning on the Phone and other Consumer Devices Workshop