基于深度强化学习的混合现实中自适应3D用户界面放置
人机交互
2025-05-01 v1 人工智能
计算机视觉与模式识别
摘要
混合现实(MR)通过将虚拟内容持续集成到用户对物理环境的视图中,可以辅助用户完成任务。然而,由于MR体验的动态性,如何以及在哪里放置这些内容以最好地支持用户一直是一个具有挑战性的问题。与先前研究优化方法的工作不同,我们正在探索强化学习(RL)如何辅助连续3D内容放置,该放置能感知用户的姿态及其周围环境。通过初步探索和初步评估,我们的结果展示了RL在放置内容以最大化移动用户奖励方面的潜力。我们进一步确定了未来研究方向,可以利用RL在MR中实现个性化和优化的UI及内容放置。
引用
@article{arxiv.2504.21731,
title = {Adaptive 3D UI Placement in Mixed Reality Using Deep Reinforcement Learning},
author = {Feiyu Lu and Mengyu Chen and Hsiang Hsu and Pranav Deshpande and Cheng Yao Wang and Blair MacIntyre},
journal= {arXiv preprint arXiv:2504.21731},
year = {2025}
}
备注
In Extended Abstracts of the CHI Conference on Human Factors in Computing Systems (CHI EA '24)