IndoToD:面向端到端任务型对话系统的印尼语多领域基准
计算与语言
2023-11-03 v1 人工智能
摘要
任务型对话(ToD)系统大多针对英语、中文等高资源语言构建。然而,有必要为其他区域或本地语言开发 ToD 系统,以拓展其在多种语言中理解对话上下文的能力。本文介绍 IndoToD,一个印尼语的端到端多领域 ToD 基准。我们通过去词汇化将两份英语 ToD 数据集扩展为印尼语,涵盖四个不同领域,以有效缩减标注规模。为保障数据收集的高质量,我们聘请母语者人工翻译对话。连同原始英语数据集,这些新印尼语数据集可作为评估印尼语与英语 ToD 系统以及探索跨语言与双语迁移学习方法潜在收益的有效基准。
引用
@article{arxiv.2311.00958,
title = {IndoToD: A Multi-Domain Indonesian Benchmark For End-to-End Task-Oriented Dialogue Systems},
author = {Muhammad Dehan Al Kautsar and Rahmah Khoirussyifa' Nurdini and Samuel Cahyawijaya and Genta Indra Winata and Ayu Purwarianti},
journal= {arXiv preprint arXiv:2311.00958},
year = {2023}
}
备注
2023 1st Workshop in South East Asian Language Processing (SEALP), Co-located with AACL 2023