进食过程中手部手势的词典编撰研究
信号处理
2018-07-10 v1
摘要
本文考虑定义人进食时所采取行动的词典编撰难题。目标是基于可辨别的意图建立客观且可复现的手势定义。这样的标准将支持从事饮食摄入自动监测问题研究的研究人员之间共享数据与结果。我们定义了五种手势:取食一口食物(bite)、啜饮液体(drink)、为进食做准备而摆弄食物(utensiling)、不动作(rest)以及一个非进食类别(other)。为检验该词典编撰,我们使用所下定义标注了一个大型数据集,并测试了评分者间信度。该数据集包含共计 276 名参与者佩戴手表式设备追踪腕部运动并进食单餐的数据。同时录制视频并随后回看以标注手势。共计 18 名评分者手动标注了 51,614 个手势。每餐至少由 1 名评分者标注,其中 95 餐由 2 名评分者标注。评分者间信度按一致性、边界模糊性与错误率计算。结果为 92.5% 一致性(75% 精确一致,17.5% 边界模糊)。摄入手势的错误率(bite 0.6% 与 drink 1.9%)远少于非摄入手势(utensiling 16.5% 与 rest 8.7%)。所有 18 名评分者间发现了相似比率。最后,将手势片段与先前工作中 bite 和 drink 的单一索引标签比较,显示 95.8% 一致性、0.6% 模糊性与 3.6% 错误率。总体而言,这些发现朝着为研究界建立进食手势共识词典迈出了一步。
引用
@article{arxiv.1807.02545,
title = {A Study of the Lexicography of Hand Gestures During Eating},
author = {Yiru Shen and Eric Muth and Adam Hoover},
journal= {arXiv preprint arXiv:1807.02545},
year = {2018}
}