中文

RhythmTA:一种面向ESL节奏训练的视觉辅助配音交互系统

人机交互 2025-07-28 v1

摘要

英语语音节奏,即重读音节的时间模式,对于英语作为第二语言(ESL)的学习者来说,是产出自然且可理解语音的关键。节奏训练通常基于对母语者语音的模仿。然而,这种方法严重依赖外部教师的反馈,阻碍了ESL学习者的独立练习。为弥补这一不足,我们提出了RhythmTA,一个交互式系统,使ESL学习者能够通过配音(一种基于模仿的方法)独立练习语音节奏。该系统自动从任何英语语音中提取节奏,并引入新颖的视觉设计以支持配音练习的三个阶段:(1) 带视觉辅助的同步聆听以增强感知,(2) 通过视觉提示引导跟读以实现自我调整,以及(3) 通过并行视图进行对比反思以实现自我监控。我们的设计基于一项对九位英语口语教师的形成性研究,该研究明确了当前实践与挑战。一项包含十二名ESL学习者的用户研究表明,RhythmTA能有效增强学习者的节奏感知,并在改善节奏产出方面展现出显著潜力。

关键词

引用

@article{arxiv.2507.19026,
  title  = {RhythmTA: A Visual-Aided Interactive System for ESL Rhythm Training via Dubbing Practice},
  author = {Chang Chen and Sicheng Song and Shuchang Xu and Zhicheng Li and Huamin Qu and Yanna Lin},
  journal= {arXiv preprint arXiv:2507.19026},
  year   = {2025}
}