PFT-SSR：用于立体图像超分辨率的视差融合Transformer
计算机视觉与模式识别
2023-03-27 v1
摘要
立体图像超分辨率旨在利用双目系统提供的补充信息来提升图像超分辨率的性能。尽管已有方法取得了令人鼓舞的结果，但它们并未充分利用跨视角与视角内的信息。为了进一步释放双目图像的潜力，本文提出一种新颖的基于Transformer的视差融合模块，称为视差融合Transformer（PFT）。PFT采用跨视角融合Transformer（CVFT）利用跨视角信息，并采用视角内精炼Transformer（IVRT）进行视角内特征精炼。同时，我们以Swin Transformer作为特征提取与超分辨率重建的主干，形成称为PFT-SSR的纯Transformer架构。大量实验与消融研究表明，PFT-SSR取得了具有竞争力的结果，并优于大多数SOTA方法。源代码见 https://github.com/MIVRC/PFT-PyTorch。
引用
@article{arxiv.2303.13807,
title = {PFT-SSR: Parallax Fusion Transformer for Stereo Image Super-Resolution},
author = {Hansheng Guo and Juncheng Li and Guangwei Gao and Zhi Li and Tieyong Zeng},
journal= {arXiv preprint arXiv:2303.13807},
year = {2023}
}
备注
5 pages, 3 figures