论关键期在多阶段强化学习中的重要性
人工智能
2022-08-10 v1 机器学习
神经与进化计算
摘要
婴儿生命的最初几年被称为关键期，由于神经可塑性，此期间学习性能的整体发展受到显著影响。近期研究中，采用深度神经网络模拟真实神经元机制的 AI 智能体表现出了类似于人类关键期的学习期。尤其在该初始期内，适当刺激对发展学习能力起着至关重要的作用。然而，将人类认知偏置转化为适当的塑形奖励颇具挑战，且先前关于关键期的工作并未聚焦于寻找适当刺激。为更进一步，我们提出多阶段强化学习以强调在关键期附近寻找“适当刺激”。受人类早期认知发展阶段启发，我们在关键期附近使用多阶段引导，并从 AI 智能体的性能、效率与稳定性方面论证了适当的塑形奖励（阶段-2 引导）。
引用
@article{arxiv.2208.04832,
title = {On the Importance of Critical Period in Multi-stage Reinforcement Learning},
author = {Junseok Park and Inwoo Hwang and Min Whoo Lee and Hyunseok Oh and Minsu Lee and Youngki Lee and Byoung-Tak Zhang},
journal= {arXiv preprint arXiv:2208.04832},
year = {2022}
}
备注
Accepted by the ICML Complex Feedback in Online Learning Workshop (Open Problems) 2022