构建 BROOK:用于人车交互研究的多模态面部视频数据库
人机交互
2020-05-20 v2 计算机视觉与模式识别
摘要
随着自动驾驶汽车的日益普及,人车交互情境中的机会不断增多。然而,针对此类特定用例的综合具体数据库支持的缺乏限制了整个设计空间中的相关研究。在本文中,我们呈现了进行中的 BROOK,一个带有面部视频记录的公有多模态数据库,可用于刻画驾驶员的情感状态与驾驶风格。我们首先详细解释如何过度构建该数据库,以及通过一项为期十个月的研究我们所获得的成果。随后我们展示一个基于神经网络的预测器,其利用 BROOK 通过面部视频支持多模态预测(包括心率和皮电等生理数据以及车速等驾驶状态数据)。最后,我们讨论构建此类数据库时的相关问题以及 BROOK 背景下的未来方向。我们相信 BROOK 是未来人车交互研究的重要基石。
引用
@article{arxiv.2005.08637,
title = {Building BROOK: A Multi-modal and Facial Video Database for Human-Vehicle Interaction Research},
author = {Xiangjun Peng and Zhentao Huang and Xu Sun},
journal= {arXiv preprint arXiv:2005.08637},
year = {2020}
}
备注
Conference: ACM CHI Conference on Human Factors in Computing Systems Workshops (CHI'20 Workshops)At: Honolulu, Hawaii, USA URL:https://emergentdatatrails.com