中文

人们如何探索虚拟环境?

计算机视觉与模式识别 2017-09-21 v2

摘要

理解人们如何探索沉浸式虚拟环境对于许多应用至关重要,例如设计虚拟现实(VR)内容、开发新的压缩算法,或学习显著性(saliency)或视觉注意力的计算模型。尽管近期一系列工作聚焦于桌面观看条件下的显著性建模,但 VR 与这些条件截然不同,因为观看行为受立体视觉以及头部朝向、注视点与其他运动学约束之间复杂交互的支配。为了加深我们对 VR 中观看行为与显著性的理解,我们采集并分析了 169 位用户探索立体、静态全向全景图时的注视点与头部朝向数据,涵盖三种不同观看条件下共计 1980 条头部与注视轨迹。我们对数据进行了详尽分析,得出若干重要见解,例如存在一种特定的注视偏置(fixation bias),随后我们利用该偏置将现有显著性预测器适配到沉浸式 VR 条件。此外,我们还探索了数据与分析的其他应用,包括 VR 视频剪辑的自动对齐、全景缩略图生成、全景视频摘要以及基于显著性的压缩。

关键词

引用

@article{arxiv.1612.04335,
  title  = {How do people explore virtual environments?},
  author = {Vincent Sitzmann and Ana Serrano and Amy Pavel and Maneesh Agrawala and Diego Gutierrez and Belen Masia and Gordon Wetzstein},
  journal= {arXiv preprint arXiv:1612.04335},
  year   = {2017}
}

备注

First two authors contributed equally