一种高效的人机协同交互系统，桥接重症监护病房中的视觉感知与大语言模型

重症监护病房（ICU）是具有高风险监测和复杂数据管理的关键环境。然而，当前的实践通常依赖手动数据录入和碎片化的信息系统，这引入了对患者安全和运营效率的潜在风险。为解决这些问题，我们提出了一种基于云-边-端架构的人机协同系统，该系统集成了视觉感知的数据提取和语义交互机制。具体而言，一个视觉感知的边缘模块非侵入性地从床旁监护仪捕获实时生理数据，减少了手动录入错误。为了提高对碎片化数据源的访问，一个由大语言模型（LLM）驱动的语义交互模块使医生能够对结构化患者数据执行高效直观的语音查询。分层的云-边-端部署确保了低延迟通信和可扩展的系统性能。我们的系统减轻了 ICU 护士和医生的认知负担，并展示了在智能医疗系统中更广泛应用的潜力。