面向 BIM authoring 工具的 copilot 系统：基于大语言模型的智能人机交互代理
人机交互
2024-06-26 v1 人工智能
计算与语言
机器学习
摘要
面对日益复杂的 BIM authoring 软件及其高额学习成本，设计师常seek更智能、轻量级的方式与软件交互。他们希望自动化建模工作流程，规避软件使用过程中遇到的障碍与困难，从而专注于设计过程本身。为此，本文提出一种基于大语言模型的自主代理框架，可作为 BIM authoring 工具中的 copilot，回答软件使用问题、从自然语言中理解用户的设计意图，并通过调用适当工具自主执行建模任务。在基于 Vectorworks 的 BIM authoring 软件开展案例研究中，我们实现了一个软件原型，将该框架无缝集成到 BIM authoring 场景中。我们评估了在面对复杂指令时，不同大语言模型在该框架中的规划与推理能力。本工作表明，基于大语言模型的代理在设计自动化和智能交互方面具有巨大的潜力。
引用
@article{arxiv.2406.16903,
title = {Towards a copilot in BIM authoring tool using a large language model-based agent for intelligent human-machine interaction},
author = {Changyu Du and Stavros Nousias and André Borrmann},
journal= {arXiv preprint arXiv:2406.16903},
year = {2024}
}