基于多三维模型配准的增强现实（AR）装配指导
人机交互
2023-11-30 v2 计算机视觉与模式识别
摘要
本文介绍了一种新颖的、无标记的、逐步的、原位三维增强现实（AR）指导方法及其应用——BRICKxAR（多三维模型/M3D）——用于小零件装配。BRICKxAR（M3D）在物理装配模型的装配位置真实地可视化渲染的三维装配零件（图 1）。用户通过用户界面控制装配过程。BRICKxAR（M3D）利用深度学习训练的三维模型配准。随着装配模型在每一步更新，物体识别与跟踪变得具有挑战性。此外，在装配过程中，三维装配中的并非每个零件都可能被相机可见。BRICKxAR（M3D）将多个装配阶段与步数计数相结合以应对这些挑战。因此，使用更少的阶段简化了复杂装配过程，而步数计数有助于准确的物体识别与每一步的精确可视化。我们对 BRICKxAR（M3D）原型进行了测试与启发式评估，并与可视化和人机交互领域的用户及专家进行了定性分析。BRICKxAR（M3D）提供稳健的三维 AR 指导并允许操作装配模型，有潜力应用于从制造装配到建筑施工的不同尺度。
引用
@article{arxiv.2311.16337,
title = {Multi-3D-Models Registration-Based Augmented Reality (AR) Instructions for Assembly},
author = {Seda Tuzun Canadinc and Wei Yan},
journal= {arXiv preprint arXiv:2311.16337},
year = {2023}
}