智能体也会梦见电子羊吗?:通过生成式学习提升强化学习的泛化能力
机器学习
2024-03-14 v1 人工智能
摘要
过度拟合大脑假说认为,梦的发生是为了让人类大脑实现泛化。本文探讨强化学习智能体是否同样如此。在真实环境中经验有限的情况下,我们采用基于想象的强化学习,在类似梦境的片段上训练策略,其中非想象的预测轨迹通过生成式增强进行修改。在四个 ProcGen 环境中的实验表明,与经典的想象方法和基于收集经验的离线训练相比,我们的方法在处理奖励稀疏的环境时能够达到更高的泛化水平。
引用
@article{arxiv.2403.07979,
title = {Do Agents Dream of Electric Sheep?: Improving Generalization in Reinforcement Learning through Generative Learning},
author = {Giorgio Franceschelli and Mirco Musolesi},
journal= {arXiv preprint arXiv:2403.07979},
year = {2024}
}