基于强化学习的振荡阻尼:将单智能体 RL 算法扩展至 100 辆自动驾驶汽车的高速公路实地运营测试
系统与控制
2024-05-15 v2 机器人学
系统与控制
摘要
在本文中,我们探讨了截至 2023 年历史上规模最大的旨在平滑交通流的自动驾驶汽车实地测试中部署的强化学习 (RL) 算法的技术细节,揭示了为自动驾驶汽车开发 RL 控制器所带来的挑战和突破。我们深入研究了 RL 算法背后的基本概念及其在自动驾驶汽车背景下的应用,详细讨论了从仿真到部署的开发过程,从设计仿真器到奖励函数塑造。我们展示了仿真和部署的结果,讨论了 RL 控制器的流平滑效益。从理解马尔可夫决策过程的基础到探索深度 RL 等先进技术,我们的文章提供了推动这一快速发展领域的理论基础和实际实施的全面概述和深入探讨。我们还展示了现实世界的案例研究和替代研究项目,突出了 RL 控制器在彻底改变自动驾驶方面的影响。从应对复杂的城市环境到处理不可预测的交通场景,这些智能控制器正在推动自动驾驶汽车所能 achieve 的界限。此外,我们检查了将 RL 控制器部署到自动驾驶汽车周围的安全考虑因素和以硬件为中心的技术细节。随着这些算法通过与环境的交互学习和进化,确保其行为符合安全标准变得至关重要。我们探讨了为解决这些挑战而开发的方法和框架,强调了为自动驾驶汽车构建可靠控制系统的重要性。
引用
@article{arxiv.2402.17050,
title = {Reinforcement Learning Based Oscillation Dampening: Scaling up Single-Agent RL algorithms to a 100 AV highway field operational test},
author = {Kathy Jang and Nathan Lichtlé and Eugene Vinitsky and Adit Shah and Matthew Bunting and Matthew Nice and Benedetto Piccoli and Benjamin Seibold and Daniel B. Work and Maria Laura Delle Monache and Jonathan Sprinkle and Jonathan W. Lee and Alexandre M. Bayen},
journal= {arXiv preprint arXiv:2402.17050},
year = {2024}
}