阿拉伯语自发对话与实例消息的话轮分割为语句方法
计算与语言
2015-05-13 v1
摘要
文本分割任务是许多自然语言处理(NLP)（如文本摘要、文本翻译、对话语言理解等）的基本处理任务。话轮分割被视为构建自动人机系统的对话理解任务中的关键部分。本文中，我们提出了一种利用机器学习(ML)方法将话轮分割为语句的新方法，用于埃及自发对话与实例消息(IM)，作为自动理解埃及自发对话与IM任务的一部分。由于缺乏埃及方言对话语料库，该系统使用我们自建的语料库进行评估，该语料库包含3001个话轮，这些话轮从埃及呼叫中心手动收集、分割和标注。系统取得了90.74%的F1分数和95.98%的准确率。
引用
@article{arxiv.1505.03081,
title = {Turn Segmentation into Utterances for Arabic Spontaneous Dialogues and Instance Messages},
author = {AbdelRahim A. Elmadany and Sherif M. Abdou and Mervat Gheith},
journal= {arXiv preprint arXiv:1505.03081},
year = {2015}
}