利用大语言模型与多模态模型推动假肢技术发展
机器人学
2024-03-12 v2
摘要
本文展望了假肢设备的未来，利用大语言模型 (LLMs) 和大多模态模型 (LMMs) 的进步，彻底变革人类与辅助技术之间的交互。与传统依赖有限且预定义命令的假肢不同，该方法旨在开发智能假肢，使其能够通过自然语言和多模态输入理解并响应用户需求。实现这一愿景需要开发一种控制系统，能够将广泛的自然语言和多模态输入翻译为假肢设备的可执行命令。这包括创建能够从文本和多模态数据中提取并解释特征的模型，确保设备不仅遵循用户命令，还能智能地响应环境和用户意图，从而标志着假肢技术的重大飞跃。
引用
@article{arxiv.2403.04974,
title = {Embracing Large Language and Multimodal Models for Prosthetic Technologies},
author = {Sharmita Dey and Arndt F. Schilling},
journal= {arXiv preprint arXiv:2403.04974},
year = {2024}
}