多尺度渐进特征嵌入实现精确的近红外到RGB光谱域转换
计算机视觉与模式识别
2023-12-27 v1 图像与视频处理
摘要
近红外到RGB光谱域转换是一项具有挑战性的任务，因为存在映射歧义，且现有方法的学习能力有限。为了解决这些挑战，我们提出通过多尺度渐进特征嵌入网络（MPFNet）对近红外图像进行着色，并以灰度图像着色为指导。具体来说，我们首先引入一个域转换模块，将近红外源图像转换到灰度目标域。通过采用渐进训练策略，两个任务域的统计和语义知识通过一系列像素级和特征级一致性约束得到有效对齐。此外，我们设计了一个多尺度渐进特征嵌入网络以提高学习能力。实验表明，我们的MPFNet在近红外到RGB光谱域转换任务中，在PSNR方面比最先进的同类方法高出2.55 dB。
引用
@article{arxiv.2312.16040,
title = {Multi-scale Progressive Feature Embedding for Accurate NIR-to-RGB Spectral Domain Translation},
author = {Xingxing Yang and Jie Chen and Zaifeng Yang},
journal= {arXiv preprint arXiv:2312.16040},
year = {2023}
}
备注
Accepted by IEEE VCIP 2023