VRCopilot：在VR中利用生成式AI进行3D布局创作
信号处理
2024-08-20 v1
摘要
沉浸式创作通过虚拟现实（VR）中的直接交互为用户提供了直观的3D场景创建媒介。生成式AI的最新进展使得自动创建逼真的3D布局成为可能。然而，目前尚不清楚生成式AI的能力如何用于沉浸式创作，以支持流畅的交互、用户代理和创造力。我们引入了VRCopilot，一种混合主动方法，将预训练的生成式AI模型集成到沉浸式创作中，以促进VR中的人机协同创作。VRCopilot提供多模态交互以支持与AI的快速原型设计和迭代，并提供线框等中间表示以增强用户对生成内容的控制。通过一系列用户研究，我们评估了沉浸式创作中手动、脚手架式和自动创建方式的潜力和挑战。我们发现，使用线框的脚手架式创建增强了用户代理，优于自动创建。我们还发现，手动创建通过多模态规范提供了最高的创造力和代理感。
引用
@article{arxiv.2408.09381,
title = {Channel Estimation, Interpolation and Extrapolation in Doubly-dispersive Channels},
author = {Zijun Gong and Fan Jiang and Yuhui Song and Cheng Li and Xiaofeng Tao},
journal= {arXiv preprint arXiv:2408.09381},
year = {2024}
}