中文

施工进度监测中人-信息物理系统交互的自然交互方式

人机交互 2023-12-12 v1

摘要

本文探讨了建筑领域中用于人-信息物理系统(CPS)交互的自然交互方式。CPS 已被应用于建筑领域的多种目的,有望提高施工作业的安全性和生产力。然而,关于建筑中人类-CPS 交互的研究很少。本研究提出了两种用于施工进度监测的人-CPS 交互方法:a) 使用迁移学习的手势交互,以及 b) 使用自然语言处理的语音命令交互。32 名用户的用户研究验证了所提方法的泛化性。所提出的手势识别方法在准确率(99.69% 对比 87.72%)和速度(36.05ms 对比 578.91ms)上均优于所提出的语音命令识别方法,但用户使用语音命令进行进度监测任务的正确率更高(88% 对比 66.1%)。本研究的主要贡献是开发了一个机器学习流水线和计算框架,无需大型训练数据集即可识别手势和语音命令,用于人-CPS 交互。

关键词

引用

@article{arxiv.2312.05988,
  title  = {Natural Interaction Modalities for Human-CPS Interaction in Construction Progress Monitoring},
  author = {Srijeet Halder and Kereshmeh Afsari and Alireza Shojaei},
  journal= {arXiv preprint arXiv:2312.05988},
  year   = {2023}
}

备注

15 pages