延迟Q更新:一种用于推导并网微电网最优运行策略的新型信用分配技术
系统与控制
2020-10-21 v3 机器学习
系统与控制
摘要
微电网是一种集成分布式能源以在电气边界内满足电力需求的创新系统。本研究提出一种方法,利用所提出的新型信用分配技术——延迟Q更新(delayed-Q update),推导理想的微电网运行策略,以实现微电网系统中的精细控制。该技术采用新颖特性,例如能够处理并解决微电网的延迟生效属性,该属性会阻碍学习智能体在精细控制下推导适配良好的策略。所提技术跟踪充电时段的历史,并追溯地为储能系统(ESS)充电控制分配调整后的值。由于该技术的处理过程,使用所提方法推导出的运行策略与ESS运行的真实效应高度契合。因此,它支持在精细控制的微电网环境下搜索近最优运行策略。为验证我们的技术,我们在真实世界的并网微电网系统下仿真该运行策略,并通过将我们的策略与基准策略和最优策略的性能指标进行比较,展示其向近最优策略的收敛。
引用
@article{arxiv.2006.16659,
title = {Delayed Q-update: A novel credit assignment technique for deriving an optimal operation policy for the Grid-Connected Microgrid},
author = {Hyungjun Park and Daiki Min and Jong-hyun Ryu and Dong Gu Choi},
journal= {arXiv preprint arXiv:2006.16659},
year = {2020}
}