中文

MELD-ST:一个情感感知语音翻译数据集

计算与语言 2024-05-24 v1

摘要

情感在人类对话中起着至关重要的作用。本文强调了在语音翻译中考虑情感的重要性。我们提出了用于情感感知语音翻译任务的MELD-ST数据集,包含英语到日语和英语到德语的语言对。每个语言对包含约10,000个带有MELD数据集情感标签的语音片段。使用SeamlessM4T模型在该数据集上的基线实验表明,使用情感标签进行微调可以在某些设置下提高翻译性能,凸显了在情感感知语音翻译系统中进一步研究的必要性。

关键词

引用

@article{arxiv.2405.13233,
  title  = {MELD-ST: An Emotion-aware Speech Translation Dataset},
  author = {Sirou Chen and Sakiko Yahata and Shuichiro Shimizu and Zhengdong Yang and Yihang Li and Chenhui Chu and Sadao Kurohashi},
  journal= {arXiv preprint arXiv:2405.13233},
  year   = {2024}
}

备注

9 pages. Accepted to ACL 2024 Findings. Dataset: https://huggingface.co/datasets/ku-nlp/MELD-ST