不完美反馈信道下状态更新系统的实时跟踪
系统与控制
2025-02-13 v2 系统与控制
摘要
我们考虑一个由有限状态马尔可夫源、能量采集式发射机和接收端组成的状态更新系统。正向信道和反馈信道之间均存在误差。我们研究在能量因果约束下最小化通用失真函数的长期时间平均的问题。由于反馈信道不可靠，发射机仅对传输结果以及接收端源状态估计值拥有部分认识。因此，我们将问题建模为部分可观测马尔可夫决策过程 (POMDP)，并将其转化为信念-MDP问题。无限信念空间使得求解信念-MDP 困难。因此，利用信念演化的特定性质，我们对状态空间进行截断，构建有限状态 MDP 问题，并使用相对值迭代算法 (RVIA) 求解。此外，我们提出一种低复杂度传输策略，将信念-MDP 问题转化为一系列时段内优化问题。仿真结果表明，所提出策略有效且优于基线策略。而且，我们数值地表明，所提出策略具有开关型结构。
引用
@article{arxiv.2407.06749,
title = {Real-time Tracking in a Status Update System with an Imperfect Feedback Channel},
author = {Saeid Sadeghi Vilni and Abolfazl Zakeri and Mohammad Moltafet and Marian Codreanu},
journal= {arXiv preprint arXiv:2407.06749},
year = {2025}
}