Sketched Reality：利用 AR 与驱动式实体用户界面实现虚拟与物理世界间的双向交互草图
人机交互
2022-10-05 v2 机器人学
摘要
本文介绍 Sketched Reality，一种结合 AR 草图与驱动式实体用户界面（TUI）以实现双向草图交互的方法。双向草图使虚拟草图与物理对象能够通过物理驱动与数字计算“影响”彼此。在现有 AR 草图中，虚拟与物理世界之间的关系仅是单向的——虽然物理交互可影响虚拟草图，但虚拟草图对物理对象或环境无回馈作用。相比之下，双向草图交互允许草图与驱动式 TUI 之间的无缝耦合。在本文中，我们采用桌面级小型机器人（Sony Toio）与基于 iPad 的 AR 草图工具来演示该概念。在我们的系统中，在 iPad 上绘制并模拟的虚拟草图（如线条、墙、摆与弹簧）可以移动、驱动、碰撞并约束物理 Toio 机器人，仿佛虚拟草图与物理对象通过 AR 与机器人运动之间的无缝耦合存在于同一空间中。本文贡献了一组新颖的交互以及双向 AR 草图的设计空间。我们展示了一系列潜在应用，如实体物理教育、可探索机构、儿童实体游戏，以及通过草图进行原位机器人编程。
引用
@article{arxiv.2208.06341,
title = {Sketched Reality: Sketching Bi-Directional Interactions Between Virtual and Physical Worlds with AR and Actuated Tangible UI},
author = {Hiroki Kaimoto and Kyzyl Monteiro and Mehrad Faridan and Jiatong Li and Samin Farajian and Yasuaki Kakehi and Ken Nakagaki and Ryo Suzuki},
journal= {arXiv preprint arXiv:2208.06341},
year = {2022}
}
备注
UIST 2022