中文

基于历时困难字幕课程学习的自动音频字幕生成

计算与语言 2022-06-07 v1

摘要

在本文中,我们提出一种算法 Epochal Difficult Captions,以补充任意自动音频字幕生成(AAC)任务模型的训练。Epochal Difficult Captions 是对先前工作用于训练 AAC 模型编码器的关键词估计任务的优雅演进。Epochal Difficult Captions 基于课程以及由当前轮次(epoch)函数确定的难度级别来修改目标字幕。Epochal Difficult Captions 可用于任意模型架构,且是一个不增加训练时间的轻量函数。我们在三个系统上测试了结果,表明使用 Epochal Difficult Captions 可一致地提升性能。

关键词

引用

@article{arxiv.2206.01918,
  title  = {Automated Audio Captioning with Epochal Difficult Captions for Curriculum Learning},
  author = {Andrew Koh and Soham Tiwari and Chng Eng Siong},
  journal= {arXiv preprint arXiv:2206.01918},
  year   = {2022}
}

备注

4 content pages, 1 reference page