中文

CoNES:凸自然进化策略

机器学习 2020-07-21 v2 机器人学 机器学习

摘要

我们提出一种新颖的算法——凸自然进化策略(CoNES)——通过利用凸优化与信息几何的工具来优化高维黑箱函数。CoNES被表述为一个可有效求解的凸规划,其调整进化策略(ES)梯度估计以促进快速收敛。所得算法对信念分布的参数化具有不变性。我们的数值结果表明,在用于基准测试黑箱优化器的一组函数上,CoNES大幅优于传统黑箱优化方法。此外,在OpenAI的MuJoCo强化学习运动任务的选择上,CoNES展现出比传统黑箱方法更快收敛的能力。

关键词

引用

@article{arxiv.2007.08601,
  title  = {CoNES: Convex Natural Evolutionary Strategies},
  author = {Sushant Veer and Anirudha Majumdar},
  journal= {arXiv preprint arXiv:2007.08601},
  year   = {2020}
}