跨相机深度彩色化
计算机视觉与模式识别
2022-09-08 v2 图像与视频处理
摘要
本文考虑彩色加单色双相机系统，提出一种端到端卷积神经网络，以高效且经济的方式对齐并融合来自该系统的图像。我们的方法以跨域与跨尺度图像为输入，进而合成高分辨率彩色化结果，以缓解单相机成像系统中时空分辨率与色彩深度之间的权衡。与先前彩色化方法不同，我们的方法可适应具有不同 spacetime 分辨率的彩色与单色相机，在实用中具备灵活性与鲁棒性。我们方法的关键组件是一个跨相机对齐模块，其为跨域图像对齐生成多尺度对应。通过在多个数据集与多种设置上的大量实验，我们验证了方法的灵活性与有效性。显著地，我们的方法相较SOTA方法持续取得约10dB PSNR增益。代码见：https://github.com/IndigoPurple/CCDC
引用
@article{arxiv.2209.01211,
title = {Cross-Camera Deep Colorization},
author = {Yaping Zhao and Haitian Zheng and Mengqi Ji and Ruqi Huang},
journal= {arXiv preprint arXiv:2209.01211},
year = {2022}
}
备注
12 pages, 6 figures