构建与评估基于 360° 视频的大规模城市探索真实虚拟世界
多媒体
2025-10-14 v1
摘要
我们提出构建名为 360RVW 的真实虚拟世界，用于大型城市环境，直接从 360° 视频中构建。我们提供了一个交互式探索界面，用户可通过自己的 avatar 自由导航。360° 视频同时记录拍摄位置的整个环境，导致高度真实和沉浸式的表示。我们的系统使用沿街道记录的 360° 视频，通过四个主要操作构建 360RVW：通过交叉口检测进行视频分割、用于移除摄影师的视频完成、用于虚拟碰撞检测的语义分割，以及投影到跟随 avatar 运动的摄像机轨迹上的扭曲球面。我们的界面允许用户通过在交叉口改变行走方向或选择地图上的新位置来探索大型城市环境。即使没有 3D 模型，用户也能通过语义分割产生的元数据体验与建筑物的碰撞。此外，我们流式传输 360° 视频，使用户可通过网页浏览器直接访问 360RVW。我们全面评估了系统，包括与以前探索界面进行的感知实验。结果确认了系统质量，特别是关于用户存在感和交互式探索方面，使其特别适合城市环境的虚拟导览。
引用
@article{arxiv.2510.11447,
title = {Building and Evaluating a Realistic Virtual World for Large Scale Urban Exploration from 360{\deg} Videos},
author = {Mizuki Takenawa and Naoki Sugimoto and Leslie Wöhler and Satoshi Ikehata and Kiyoharu Aizawa},
journal= {arXiv preprint arXiv:2510.11447},
year = {2025}
}
备注
Multimedia Tools and Applications, Springer (accepted)