学习使用多球面图像合成6-DoF全景视频
计算机视觉与模式识别
2021-03-11 v1 多媒体
摘要
全景视频是虚拟现实(VR)的重要组成部分。尽管已有多种方法被提出以生成可用六自由度(6-DoF)观看的内容，现有系统通常涉及复杂的深度估计、图像修复或拼接预处理。在本文中，我们提出一个使用3D ConvNet生成多球面图像(MSI)表示的系统，该表示可在6-DoF VR中体验。该系统直接利用常规全景VR摄像机画面，无需深度图或分割掩码，从而显著简化了6-DoF全景视频合成的整体复杂度。通过使用新设计的加权球面扫描体(WSSV)融合技术，我们的方法兼容大多数全景VR摄像机设置。我们提出了一种无伪影高质量6-DoF内容的真实值生成方法，可供研发社区用于6-DoF内容生成。
引用
@article{arxiv.2103.05842,
title = {Learning to compose 6-DoF omnidirectional videos using multi-sphere images},
author = {Jisheng Li and Yuze He and Yubin Hu and Yuxing Han and Jiangtao Wen},
journal= {arXiv preprint arXiv:2103.05842},
year = {2021}
}