中文

最优神经元选择:用于强化学习的 NK 回声状态网络

神经与进化计算 2015-05-11 v1

摘要

本文介绍了 NK 回声状态网络。NK 回声状态网络中的学习问题被简化为优化一种称为 NK 景观的自旋玻璃问题的特殊形式。不使用权重调整;所有学习通过启动(打开)或关停(关闭)神经元来完成,以寻找协同工作实现所需计算的神经元组合。对于特殊类型的 NK 景观,可以使用动态规划在多项式时间内获得精确的全局解。NK 回声状态网络被应用于一个需要递归网络的强化学习问题:在给定无速度信息的情况下使小车上的两根杆保持平衡。实验结果表明,NK 回声状态网络学习非常迅速且具有良好的泛化能力。

关键词

引用

@article{arxiv.1505.01887,
  title  = {Optimal Neuron Selection: NK Echo State Networks for Reinforcement Learning},
  author = {Darrell Whitley and Renato Tinós and Francisco Chicano},
  journal= {arXiv preprint arXiv:1505.01887},
  year   = {2015}
}