面向沉浸式通信的生成式 AI：6G 时代物联网感知的下一站
计算与语言
2024-08-14 v2 人工智能
人机交互
多媒体
网络与互联网体系结构
摘要
过去二十年间，物联网 (IoT) 已成为一个变革性概念。随着我们逼近 2030 年，一种新范式——感知互联网 (Internet of Senses, IoS) 正在涌现。不同于传统虚拟现实 (VR)，IoS 旨在提供多感官体验，意识到在物理现实中，我们的感知范围远超视觉和听觉；它涵盖了多种感官。本文探讨了驱动沉浸式多感官媒体的现有技术，深入分析其能力与潜在应用。本探索包括传统沉浸式媒体流传输与一种利用生成式人工智能 (AI) 实现语义通信的应用案例之间的比较分析。该分析的焦点是该方案在带宽消耗方面实现了 99.93% 的显著降低。通过这一比较，我们旨在凸显生成式 AI 在沉浸式媒体中的实际应用。同时，本文也讨论了该领域的重大挑战，如多媒体的时间同步、确保高吞吐量、最小化端到端 (End-to-End, E2E) 延迟以及在低带宽条件下的鲁棒性，并概述了未来发展方向。
引用
@article{arxiv.2404.01713,
title = {Generative AI for Immersive Communication: The Next Frontier in Internet-of-Senses Through 6G},
author = {Nassim Sehad and Lina Bariah and Wassim Hamidouche and Hamed Hellaoui and Riku Jäntti and Mérouane Debbah},
journal= {arXiv preprint arXiv:2404.01713},
year = {2024}
}