VMAgent:面向强化学习的调度模拟器
机器学习
2021-12-10 v1 人工智能
摘要
本文介绍了一个名为 VMAgent 的新型模拟器,旨在帮助强化学习(RL)研究者更好地探索新方法,特别是针对虚拟机调度。VMAgent 受实际虚拟机(VM)调度任务的启发,提供了一个能够反映云计算真实情况的高效仿真平台。从实际云计算中归纳出三种场景(衰退、恢复和扩展),并对应诸多强化学习挑战(高维状态与动作空间、高度非平稳性以及终身需求)。VMAgent 为 RL 研究者提供了灵活的配置,以针对不同的问题特征设计其定制化的调度环境。从虚拟机调度的视角,VMAgent 也有助于探索更优的基于学习的调度方案。
引用
@article{arxiv.2112.04785,
title = {VMAgent: Scheduling Simulator for Reinforcement Learning},
author = {Junjie Sheng and Shengliang Cai and Haochuan Cui and Wenhao Li and Yun Hua and Bo Jin and Wenli Zhou and Yiqiu Hu and Lei Zhu and Qian Peng and Hongyuan Zha and Xiangfeng Wang},
journal= {arXiv preprint arXiv:2112.04785},
year = {2021}
}