中文

CliniDial: 临床操作中团队反思的多模态对话数据集

计算与语言 2025-06-17 v1

摘要

在临床操作中,团队协作可能是决定最终结果的关键因素。先前的研究表明,充分的协作是决定手术结果的关键因素。为了了解团队在手术过程中如何实践团队协作,我们从医疗操作模拟中收集了 CliniDial。CliniDial 包含音频数据及其转录、患者模拟人的模拟生理信号,以及来自两个摄像机角度的团队操作过程。我们遵循现有框架标注行为编码,以理解 CliniDial 中的团队协作过程。我们指出了数据集的三个主要特征,包括标签不平衡、丰富且自然的交互以及多模态,并对现有大语言模型处理这些特征数据的能力进行了实验。实验结果表明,CliniDial 对现有模型构成了重大挑战,呼吁未来开发能够处理真实临床数据的方法。我们在 https://github.com/MichiganNLP/CliniDial 开源代码库。

关键词

引用

@article{arxiv.2506.12936,
  title  = {CliniDial: A Naturally Occurring Multimodal Dialogue Dataset for Team Reflection in Action During Clinical Operation},
  author = {Naihao Deng and Kapotaksha Das and Rada Mihalcea and Vitaliy Popov and Mohamed Abouelenien},
  journal= {arXiv preprint arXiv:2506.12936},
  year   = {2025}
}

备注

Accepted to ACL 2025 Findings