基于历时困难字幕课程学习的自动音频字幕生成
计算与语言
2022-06-07 v1
摘要
在本文中,我们提出一种算法 Epochal Difficult Captions,以补充任意自动音频字幕生成(AAC)任务模型的训练。Epochal Difficult Captions 是对先前工作用于训练 AAC 模型编码器的关键词估计任务的优雅演进。Epochal Difficult Captions 基于课程以及由当前轮次(epoch)函数确定的难度级别来修改目标字幕。Epochal Difficult Captions 可用于任意模型架构,且是一个不增加训练时间的轻量函数。我们在三个系统上测试了结果,表明使用 Epochal Difficult Captions 可一致地提升性能。
引用
@article{arxiv.2206.01918,
title = {Automated Audio Captioning with Epochal Difficult Captions for Curriculum Learning},
author = {Andrew Koh and Soham Tiwari and Chng Eng Siong},
journal= {arXiv preprint arXiv:2206.01918},
year = {2022}
}
备注
4 content pages, 1 reference page