智能多模态感知-通信一体化：机器联觉

在第六代（6G）无线通信时代，通感一体化（ISAC）被视为通过赋予无线通信感知能力来升级物理系统的一种有前景的方案。现有 ISAC 主要面向静态场景且以射频（RF）传感器为主要参与者，因而缺乏全面的环境特征刻画，并在动态环境中面临严重的性能瓶颈。迄今已有大量关于 ISAC 的综述，但仅限于总结基于 RF 的雷达感知。当前一些研究致力于探索多模态感知-通信一体化，但仍缺乏全面回顾。因此，本文受人类联觉启发推广 ISAC 概念，建立智能多模态感知-通信一体化的统一框架，并在此框架下提供全面综述。所谓机器联觉（SoM）给出了此类智能一体化最清晰的认识，并首次详述其范式。我们首先论证新范式的必要性。随后给出 SoM 的定义并深入其详细范式，总结为三种运行模式。为便利 SoM 研究，我们概述其前提即混合多模态（MMM）数据集。接着介绍多模态感知与通信间的映射关系。之后涵盖基于 SoM 增强与 SoM 协同应用的技术综述。为印证 SoM 的优越性，我们还给出与双功能波形及预测波束成形设计相关的仿真结果。最后提出若干潜在方向以启发未来研究。