GTF：用于光场超分辨率的全方位 EPI Transformer
计算机视觉与模式识别
2026-05-07 v1
摘要
光场（LF）图像超分辨率受益于极线平面图像（EPI），其直线斜率显式编码了视差。然而，现有的基于 Transformer 的 LF SR 方法主要关注水平与垂直 EPI，对对角极线几何的探索尚不充分。我们提出 GTF，一种全方位 EPI Transformer，它在统一的重建框架内显式建模水平、垂直、45 度和 135 度 EPI。GTF 结合了方向性 EPI 处理、基于 MacPI 的先验注入、自适应方向融合以及保持拓扑的前馈网络，以更好地利用 LF 几何。对于 NTIRE 2026 保真度赛道，我们使用 GTF 作为主模型，而轻量级变体 GTF-Tiny 则面向效率赛道。在涵盖真实采集与合成场景的五个标准 LF SR 基准上，GTF 在无推理时增强的情况下达到 32.78 dB，而采用 EPSW 和测试时增强的更强推理设置进一步提升了性能。在 NTIRE 2026 效率约束下，GTF-Tiny 仅以 0.915M 参数和 19.81 GFLOPs 达到 32.57 dB。在 NTIRE 2026 光场图像超分辨率挑战赛中，我们的提交在 Track 1 和 Track 3 上排名第三，在 Track 2 上排名第四。架构演进、通道宽度和推理分析进一步支持了对角 EPI 建模、方向融合和轻量级设计的有效性。
引用
@article{arxiv.2605.04581,
title = {GTF: Omnidirectional EPI Transformer for Light Field Super-Resolution},
author = {Kunyu Li and Fei Wang and Lichao Zhang and Junjie Liu and Bihong Li},
journal= {arXiv preprint arXiv:2605.04581},
year = {2026}
}
备注
Accepted to NTIRE 2026. 9 pages, 2 figures