中文

面向放射科医生的语义对话系统的设计与实现

人机交互 2017-01-26 v1

摘要

本章描述了在大规模MEDICO项目中的一个综合案例研究中,为放射科医生设计的语义对话系统。MEDICO解决了在搜索医学图像和患者数据时对高级语义技术的需求。其目标是:首先,通过提供对图像语义的直接访问,实现医学图像与不同用户应用的无缝集成;其次,为放射科医生设计和实现多模态对话外壳。基于语音的语义图像检索和医学图像标注应作为临床决策支持和计算机辅助诊断帮助的基础。我们将描述临床工作流和交互需求,并重点介绍用于患者/图像搜索或标注的多模态用户界面的设计与实现,以及其在使用基于语音的对话外壳时的实现。本体建模为对话外壳和特定医学应用领域的知识表示提供了骨干;本体结构是我们组合的语义搜索与检索架构的通信基础,该架构包括MEDICO服务器、三元组存储、语义搜索API、医学可视化工具包MITK以及基于语音的对话外壳等。我们将重点关注多模态应用的可用性方面、我们的故事板以及实现的语音和触摸屏交互设计。

关键词

引用

@article{arxiv.1701.07381,
  title  = {Design and Implementation of a Semantic Dialogue System for Radiologists},
  author = {Daniel Sonntag and Martin Huber and Manuel Möller and Alassane Ndiaye and Sonja Zillner and Alexander Cavallaro},
  journal= {arXiv preprint arXiv:1701.07381},
  year   = {2017}
}