以采样达成目标:一种信息年龄感知的远程马尔可夫决策过程
信息论
2024-08-09 v3 math.IT
摘要
信息年龄(Age of Information, AoI)已被公认为衡量信息新鲜度的重要指标。这一共识的核心在于,最小化信息年龄可以提升信息的新鲜度,从而有助于提高后续决策过程的准确性。然而,迄今为止,将信息年龄与决策过程效用联系起来的直接因果关系尚未被探索。为填补这一空白,本文提出了一个采样与控制协同设计问题,称为信息年龄感知的远程马尔可夫决策过程(MDP)问题,以探索这一未被研究的关系。我们的框架重新审视了文献[1]中的采样问题,并聚焦于一个更精细的目标:从最小化信息年龄惩罚转向在随机延迟下直接优化面向目标的远程决策过程。我们推导出,信息年龄感知的远程MDP问题可以简化为一个无延迟的标准MDP问题,并揭示了仅将信息年龄作为优化指标对于实现远程决策并非最优。相反,信息年龄可以作为重要的辅助信息,以促进远程决策。
引用
@article{arxiv.2405.02042,
title = {Sampling to Achieve the Goal: An Age-aware Remote Markov Decision Process},
author = {Aimin Li and Shaohua Wu and Gary C. F. Lee and Xiaomeng Cheng and Sumei Sun},
journal= {arXiv preprint arXiv:2405.02042},
year = {2024}
}
备注
12 pages, 4 figures