元宇宙中语义通信与人工智能生成内容集成的统一框架
人机交互
2023-07-25 v2 计算机与社会
摘要
随着元宇宙持续发展，对高效通信与智能内容生成的需求变得愈发重要。语义通信侧重于从用户输入中传达意义与理解，而人工智能生成内容（AI-Generated Content）利用人工智能创建数字内容与体验。集成语义通信与人工智能生成内容（ISGC）近来备受关注，其从用户输入传输语义信息、生成数字内容并为元宇宙渲染图形。本文中，我们引入一个统一框架，该框架体现了 ISGC 的两项主要收益：用于优化资源分配的集成增益，以及用于目标导向高质量内容生成以从通信与内容双视角提升沉浸感的协调增益。我们还对现有 ISGC 方案进行分类，分析 ISGC 的主要组成部分，并给出若干用例。随后，我们基于扩散模型构建了一个案例研究，以确定在元宇宙中执行语义提取、内容生成与图形渲染的最优资源分配策略。最后，我们讨论了若干开放研究问题，鼓励进一步探索 ISGC 及其在元宇宙中相关应用的潜力。
引用
@article{arxiv.2305.11911,
title = {A Unified Framework for Integrating Semantic Communication and AI-Generated Content in Metaverse},
author = {Yijing Lin and Zhipeng Gao and Hongyang Du and Dusit Niyato and Jiawen Kang and Abbas Jamalipour and Xuemin Sherman Shen},
journal= {arXiv preprint arXiv:2305.11911},
year = {2023}
}
备注
8 pages, 6 figures