虚拟副驾驶：面向单人驾驶操作的多模态大语言模型支持的快速访问程序
人机交互
2024-03-26 v1
摘要
技术进步、飞行员短缺和成本压力正推动航空业向单人驾驶甚至远程操作的趋势发展。考虑到单人驾驶操作所涉及的巨大工作量和巨大风险，开发虚拟副驾驶 (V-CoP) 被认为是确保航空安全的一种潜在途径。本研究提出了一个 V-CoP 概念，并探讨了人类与虚拟助手如何有效协作。我们进行了一项初步案例研究，利用多模态大语言模型 (LLM) 探索 V-CoP 的一个关键角色，即自动化快速程序搜索。由 LLM 支持的 V-CoP 整合了飞行员指令和实时驾驶舱仪表数据，以提示适用的航空手册和操作程序。结果显示，由 LLM 支持的 V-CoP 在情境分析中达到了高准确率 (90.5%)，并在程序信息检索方面表现有效 (86.5%)。所提出的 V-CoP 有望为未来虚拟智能助手的开发奠定基础，提高单人飞行员的表现，并降低航空中人为错误的风险。
引用
@article{arxiv.2403.16645,
title = {Virtual Co-Pilot: Multimodal Large Language Model-enabled Quick-access Procedures for Single Pilot Operations},
author = {Fan Li and Shanshan Feng and Yuqi Yan and Ching-Hung Lee and Yew Soon Ong},
journal= {arXiv preprint arXiv:2403.16645},
year = {2024}
}
备注
10 pages,7 figures