中文

Pano2Vid:观看 360° 视频的自动摄影

计算机视觉与模式识别 2016-12-08 v1

摘要

我们引入了 Pano2Vid 这一新任务——全景 360° 视频中的自动摄影。给定一个 360° 视频,目标是引导一个虚拟相机以虚拟方式捕捉看起来自然的正常视场(NFOV)视频。通过在每一时间步选择全景中“看向何处”,Pano2Vid 旨在将摄像师和最终观众从决定观看什么的任务中解放出来。为实现这一目标,我们首先编译了一个从网络下载的 360° 视频数据集,连同人工编辑的 NFOV 相机轨迹以便于评估。接着,我们提出了 AutoCam,一种数据驱动的方法来解决 Pano2Vid 任务。AutoCam 利用 NFOV 网络视频在每个时刻判别性地识别感兴趣的时空“一瞥”,然后使用动态规划来选择最优的类人相机轨迹。通过在多个新定义的 Pano2Vid 性能指标上与几个基线进行实验评估,我们表明我们的方法成功地生成了信息丰富的视频,这些视频可以想象是由人类摄像师拍摄的。

关键词

引用

@article{arxiv.1612.02335,
  title  = {Pano2Vid: Automatic Cinematography for Watching 360$^{\circ}$ Videos},
  author = {Yu-Chuan Su and Dinesh Jayaraman and Kristen Grauman},
  journal= {arXiv preprint arXiv:1612.02335},
  year   = {2016}
}