第一人称视角视频中的左右手分割
人机交互
2016-09-15 v1 人工智能
计算机视觉与模式识别
摘要
可穿戴摄像头允许人们从以用户为中心（第一人称视觉）的视角记录他们的日常活动。由于其有利的佩戴位置，可穿戴摄像头频繁捕捉用户的手部，因此可能成为不同应用中有前景的用户-机器交互工具。现有的第一人称视觉方法将手部分割视为背景-前景问题，忽略了两个重要事实：i) 手不是单一的“类皮肤”运动元素，而是一对相互作用的协作实体；ii) 密切的双手交互可能导致手与手之间的遮挡，从而产生单个类手分割区域。这些事实妨碍了对手的运动和交互的正确理解。我们的方法扩展了传统的背景-前景策略，包含一个基于角度和位置的 Maxwell 分布的左右手识别步骤。通过利用时间超像素来解决手与手之间的遮挡。实验结果表明，除了可靠的左右手分割外，我们的方法还显著改进了传统的背景-前景手部分割。
引用
@article{arxiv.1607.06264,
title = {Left/Right Hand Segmentation in Egocentric Videos},
author = {Alejandro Betancourt and Pietro Morerio and Emilia Barakova and Lucio Marcenaro and Matthias Rauterberg and Carlo Regazzoni},
journal= {arXiv preprint arXiv:1607.06264},
year = {2016}
}