基于知识嵌入 DDPG 的 6G RAN 多用户多应用数据包调度面向特定应用的 QoE 增强
网络与互联网体系结构
2024-05-03 v1 系统与控制
系统与控制
摘要
来自不同用户和同一设备的并发应用日益多样化，这要求未来无线通信实现面向特定应用的体验质量（QoE）增强。实现这一目标依赖于面向特定应用的数据包调度，因为它对于通过实现面向特定应用的服务质量（QoS）要求来达成定制化的 QoE 增强以及获得最佳感知 QoE 值至关重要。然而，多样化的 QoE 感知机制相互交织、并发应用间的公平性以及网络动态的影响，不可避免地使定制化数据包调度复杂化。为实现并发应用的特定 QoE 增强，本文首先将 6G 无线接入网络（RAN）下行链路中的多用户多应用数据包调度问题建模为马尔可夫决策过程（MDP）问题。为解决该问题，提出了一种基于深度确定性策略梯度（DDPG）的解决方案。然而，由于状态空间和动作空间的维度均较高，训练后的 DDPG 智能体可能会做出导致不必要资源浪费的决策。因此，提出了一种知识嵌入方法，根据人类经验调整 DDPG 智能体的决策。大量实验表明，基于 DDPG 的数据包调度器优于基线算法，且所提出的知识嵌入技术行之有效。
引用
@article{arxiv.2405.01007,
title = {Multi-User Multi-Application Packet Scheduling for Application-Specific QoE Enhancement Based on Knowledge-Embedded DDPG in 6G RAN},
author = {Yongqin Fu and Xianbin Wang},
journal= {arXiv preprint arXiv:2405.01007},
year = {2024}
}