将大型语言模型嵌入扩展现实：包容性、参与度和隐私的机遇与挑战

人工智能和人机交互的进步很可能使扩展现实（XR）变得无处不在。虽然XR可以为用户提供交互式、引人入胜和沉浸式的体验，但非玩家角色通常以预设和传统的方式使用。本文主张通过将大型语言模型（LLM）嵌入虚拟化身或叙事中，并利用提示工程和微调LLM来促进包容性，从而在XR中使用LLM。我们认为这种包容性将促进XR使用的多样性。此外，LLM的多功能对话能力可能会提高XR中的参与度，帮助XR变得无处不在。最后，我们推测，将用户提供给LLM驱动空间的信息与获取的生物特征数据相结合，可能会导致新的隐私侵犯。在探索潜在的隐私泄露时，检查用户的隐私顾虑和偏好也至关重要。因此，尽管存在挑战，LLM驱动的XR是一个充满希望且拥有众多机遇的领域。