过曝掩膜融合:可泛化的逆向ISP多步精化
计算机视觉与模式识别
2022-10-24 v1 机器学习
图像与视频处理
摘要
随着深度学习方法取代ISP将传感器RAW读数转换为RGB图像,众多方法已固化到实际应用中。同样重要的是反转这一过程,它将在增强于RAW域进行的计算摄影任务中发挥作用,解决可用RAW数据匮乏的问题,同时受益于直接在传感器读数上执行任务的优势。本文提出的方法是针对RAW重建任务的state-of-the-art解决方案,且融合过曝掩膜的多步精化过程在三个方面具有新颖性:流水线从RGB训练到去马赛克RAW而非到bayer,从而允许使用感知损失函数;多步过程大幅提升了基线U-Net从始至终的性能;该流水线是一种可泛化的精化过程,能够增强其他支持端到端学习的高性能方法。
引用
@article{arxiv.2210.11511,
title = {Overexposure Mask Fusion: Generalizable Reverse ISP Multi-Step Refinement},
author = {Jinha Kim and Jun Jiang and Jinwei Gu},
journal= {arXiv preprint arXiv:2210.11511},
year = {2022}
}
备注
15 pages, 8 figures, ECCV