LaMPilot：一个用于基于语言模型程序的自动驾驶开放基准数据集
计算与语言
2024-04-05 v2 人工智能
摘要
自动驾驶（AD）近年来取得了显著进展。然而，现有框架难以解释和执行自发的用户指令，例如“超越前方车辆”。大型语言模型（LLM）已展现出令人印象深刻的推理能力，显示出弥合这一差距的潜力。在本文中，我们提出了LaMPilot，一个将LLM集成到AD系统中的新颖框架，使其能够通过生成利用既定功能原语的代码来遵循用户指令。我们还引入了LaMPilot-Bench，这是第一个专门设计用于定量评估语言模型程序在AD中效能的基准数据集。采用LaMPilot框架，我们进行了大量实验，以评估现成的LLM在LaMPilot-Bench上的性能。我们的结果证明了LLM在处理多样化驾驶场景和遵循驾驶中用户指令方面的潜力。为促进该领域的进一步研究，我们在https://github.com/PurdueDigitalTwin/LaMPilot上发布了我们的代码和数据。
引用
@article{arxiv.2312.04372,
title = {LaMPilot: An Open Benchmark Dataset for Autonomous Driving with Language Model Programs},
author = {Yunsheng Ma and Can Cui and Xu Cao and Wenqian Ye and Peiran Liu and Juanwu Lu and Amr Abdelraouf and Rohit Gupta and Kyungtae Han and Aniket Bera and James M. Rehg and Ziran Wang},
journal= {arXiv preprint arXiv:2312.04372},
year = {2024}
}
备注
CVPR 2024