OpenMarcie：面向工业环境中多模态动作识别的数据集

智能工厂利用先进技术优化生产并提高效率。为此，识别工人活动允许对绩效指标进行准确量化，从而在整体上提高效率并促进工人安全。OpenMarcie 是目前为制造业环境中的人类活动监控所设计的最大多模态数据集。它包含来自可穿戴传感器和周围摄像机的多种数据。该数据集基于两个实验场景，涉及总计 36 名参与者。第一场景中，12 名参与者在无固定协议的半真实条件下执行自行车装配和拆卸任务，促进具有不同语义和以目标为导向的问题解决。第二个实验涉及 25 名志愿者（24 名有效数据），参与 3D 打印机装配任务，提供制造商的指令以指导志愿者获取程序知识。该场景还包括顺序性协作装配，其中参与者评估和纠正彼此的进度，反映真实的制造动态。OpenMarcie 包含超过 37 小时的以人体中心视角和外观视角为主的多模态、多位置数据，涉及 8 种数据类型和超过 200 个独立信息通道。该数据集在三个人类活动识别任务上进行了基准测试：活动分类、开放词汇描述和跨模态对齐。