基于混合现实反馈的手势识别：UnLog塔案例研究

混合现实(MR)平台使用户能够在建造高度自定义和参数化建筑构件的装配和制造过程中，直接与三维全息指令进行交互，而无需使用二维图纸。以往的MR制造项目主要依赖数字菜单和自定义按钮作为与MR环境进行用户交互的接口。尽管采用了这种方法，但其无法允许用户直接与物理对象进行交互来修改MR环境中的制造指令。本研究通过实时手势识别将用户与物理对象的交互整合到输入系统中，用于修改、更新或生成新的数字信息，从而实现物理与虚拟环境之间的相互刺激。因此，数字环境会生成用户对物理对象的交互，以实现制造过程中无缝的反馈。本研究针对UnLog塔的机器人制造、人类装配和质量控制，探讨了MR工作流程中的手势识别。