面向能效远程控制摇臂的队列采样分析与增强
系统与控制
2024-05-16 v1 系统与控制
摘要
近年来，通信与控制系统的集成在从自动驾驶车辆到工业自动化等各个领域获得了显著发展。多臂老虎机算法已被证明是解决控制问题的有效鲁棒框架。在这项工作中，我们研究了使用多臂老虎机算法控制远程设备的问题，该问题面临主要由延迟和可靠性带来的重大挑战。我们分析了多臂老虎机在动作反馈通过不可靠通信信道传输并存储在Geo/Geo/1队列中的环境下的有效性。我们研究了队列采样策略对多臂老虎机性能的影响，并引入了一种新的随机方法。其遗憾性能与文献中针对上置信界算法和汤普森采样算法的已建立算法进行了评估。此外，我们研究了最大化奖励与最小化能耗之间的权衡。
引用
@article{arxiv.2405.09430,
title = {Analyzing and Enhancing Queue Sampling for Energy-Efficient Remote Control of Bandits},
author = {Hiba Dakdouk and Mohamed Sana and Mattia Merluzzi},
journal= {arXiv preprint arXiv:2405.09430},
year = {2024}
}