SphereSR：基于连续球面图像表示的任意投影360°图像超分辨率
计算机视觉与模式识别
2021-12-15 v2
摘要
360°成像近来受到极大关注；然而，由于使用相同传感器尺寸的鱼眼镜头捕获，其角分辨率相对低于窄视场（FOV）透视图像。因此，对360°图像进行超分辨率处理是有益的。已有一些尝试，但大多将等距矩形投影（ERP）视为360°图像表示的一种方式，尽管其存在纬度相关的畸变。在这种情况下，由于输出的高分辨率（HR）图像总是与低分辨率（LR）输入处于相同的ERP格式，当将HR图像变换为其他投影类型时可能发生进一步的信息损失。本文中，我们提出SphereSR，一种从LR 360°图像生成连续球面图像表示的新框架，旨在给定球面坐标处预测RGB值，以实现任意360°图像投影的超分辨率。具体而言，我们首先提出一个基于二十面体表示球面数据并在球面上高效提取特征的特征提取模块。然后我们提出球面局部隐式图像函数（SLIIF）来预测球面坐标处的RGB值。由此，SphereSR可灵活地在任意投影类型下重建HR图像。在多个基准数据集上的实验表明，我们的方法显著超越现有方法。
引用
@article{arxiv.2112.06536,
title = {SphereSR: 360{\deg} Image Super-Resolution with Arbitrary Projection via Continuous Spherical Image Representation},
author = {Youngho Yoon and Inchul Chung and Lin Wang and Kuk-Jin Yoon},
journal= {arXiv preprint arXiv:2112.06536},
year = {2021}
}