SketchPlay：一种直观的用于通过手势绘图创建物理真实VR内容的框架
人机交互
2025-12-29 v1 计算机视觉与模式识别
摘要
在VR中创建物理真实内容通常需要复杂的建模工具或预定义的3D模型、纹理和动画，这些工具对非专家用户构成重大障碍。本文提出SketchPlay，一种新的VR交互框架，将人的空中草图和手势转化为动态、物理真实的场景，使内容创建具有直观性和趣味性。具体而言，草图捕获对象的结构和空间布局，而手势传递物理线索，如速度、方向和力量，这些线索定义运动和行为。通过将这两种互补形式的输入结合起来，SketchPlay捕获用户创建内容的结构和动力学，使能够生成各种复杂的物理现象，如刚体运动、弹性变形和布料动力学。实验结果表明，与传统基于文本的方法相比，SketchPlay在表达性和用户体验方面具有显著优势。通过提供直观而引人入目的创建过程，SketchPlay降低了非专家用户的进入门槛，并在教育、艺术和沉浸式叙事等应用中显示出巨大的潜力。
引用
@article{arxiv.2512.22016,
title = {SketchPlay: Intuitive Creation of Physically Realistic VR Content with Gesture-Driven Sketching},
author = {Xiangwen Zhang and Xiaowei Dai and Runnan Chen and Xiaoming Chen and Zeke Zexi Hu},
journal= {arXiv preprint arXiv:2512.22016},
year = {2025}
}