RealityTalk：面向 AR 实时故事讲述的语音驱动实时增强演示系统

我们提出 RealityTalk，一个通过语音驱动的交互式虚拟元素来增强实时现场演示的系统。增强演示利用嵌入式视觉与动画实现引人入胜且富有表现力的故事讲述。然而，现有的现场演示工具往往缺乏交互性与即兴性，而在视频编辑工具中创建此类效果需要大量时间与专业知识。RealityTalk 使用户能够通过实时语音驱动交互创建现场增强演示。用户可通过实时语音及辅助模态对图形元素进行交互式提示、移动和操作。基于对 177 个现有视频编辑增强演示的分析，我们提出了一组新颖的交互技术，并将其集成到 RealityTalk 中。我们从演示者角度对工具进行评估，以证明系统的有效性。