通信与计算成像集成
图像与视频处理
2024-10-30 v2 计算机视觉与模式识别
信号处理
摘要
通信技术使人类视觉感知得以突破时间与距离的限制，而计算成像技术克服了深度与广度的约束。尽管这两类技术取得了显著的成就，但它们之间信息流的阻塞是阻碍其进一步发展的瓶颈。本文提出了一种新框架——集成通信与计算成像（ICCI），以打破通信与计算成像之间固有的隔离，实现远程感知。该框架在考虑远程视觉信息的感知与传输后，进行全链路信息传输优化，旨在最小化从信息源生成到最终视觉任务执行之间的数据损失。我们通过数值分析和实验演示了ICCI框架，集成了通信系统和快照压缩成像系统。与直观的组合方案（即依次执行感知与传输）相比，ICCI方案在抗信道噪声和失真方面表现更好，同时实现更高的数据压缩率。实验实现了80公里、27波段的超光谱视频感知，帧率达30fps。这一新的ICCI远程感知范式为各种实时计算机视觉任务提供了更高效的解决方案。
引用
@article{arxiv.2410.19415,
title = {Integration of Communication and Computational Imaging},
author = {Zhenming Yu and Liming Cheng and Hongyu Huang and Wei Zhang and Liang Lin and Kun Xu},
journal= {arXiv preprint arXiv:2410.19415},
year = {2024}
}