通过对极平面图像上的 LSTM 建模打破光场超分辨率的时空-角度权衡
计算机视觉与模式识别
2019-02-18 v1 图形学
摘要
光场相机（LFC）因其广泛应用而受到越来越多的关注。然而，当前 LFC 受制于众所周知的时空-角度权衡，这被视为 LFC 设计的一个固有且基本的限制。本文通过对 LFC 中采样过程进行详细几何光学分析，表明有效采样分辨率通常高于微透镜数量。这一贡献使得在理论上打破分辨率权衡成为可能。我们的第二个贡献是一种基于对极平面图像（EPI）的超分辨率方法，可同时超分辨空间与角度维度。我们证明光场是一个二维序列，因此提出一种专门设计的 CNN-LSTM 网络来捕获 EPI 的连续性属性。我们的网络不利用语义信息，而是专注于提取 EPI 中的几何连续性。这赋予了我们的方法更强的泛化能力，并使其适用于大量先前未见的场景。在合成与真实光场上的实验均展示了相较最先进（state-of-the-art）方法的提升，尤其是在大视差区域。
引用
@article{arxiv.1902.05672,
title = {Breaking the Spatio-Angular Trade-off for Light Field Super-Resolution via LSTM Modelling on Epipolar Plane Images},
author = {Hao Zhu and Mantang Guo and Hongdong Li and Qing Wang and Antonio Robles-Kelly},
journal= {arXiv preprint arXiv:1902.05672},
year = {2019}
}
备注
10 pages, 12 figures