面向互联网声音的语义通信: 架构、设计原则与挑战
音频与语音处理
2024-07-18 v1
摘要
互联网声音(IoS)组合了声音感知、处理和传输技术,使不同声音设备能够协作。在IoS中实现声音同步的感知质量,必要的是精确同步三个关键因素:声音质量、时机控制和行为控制。然而,传统的比特导向通信方法侧重于比特复现,在动态信道条件下可能无法满足这些同步要求。语义通信(SC)通过捕获和利用其源数据的逻辑关系来处理IoS的同步挑战是一种有前景的做法。因此,本文我们提出以IoS为中心的SC框架及收发器设计。设计的编码器从多样化的来源中提取语义信息并传输给IoS听者。它还可以提炼重要语义信息以减少传输时延,以实现时机同步。在接收端,解码器采用基于上下文和基于知识的推理技术来重构和集成声音,在不同通信环境中实现声音质量同步。此外,通过定期共享知识,IoS设备的SC模型可以更新以优化其同步行为。最后,我们探讨了关于数学模型、资源分配和跨层协议的若干开放问题。
引用
@article{arxiv.2407.12203,
title = {Semantic Communication for the Internet of Sounds: Architecture, Design Principles, and Challenges},
author = {Chengsi Liang and Yao Sun and Christo Kurisummoottil Thomas and Lina Mohjazi and Walid Saad},
journal= {arXiv preprint arXiv:2407.12203},
year = {2024}
}