MeetDot：带实时翻译字幕的视频会议系统
等离子体物理
2021-09-21 v1 原子物理
计算物理
摘要
我们提出MeetDot，一种在屏幕上叠加实时翻译字幕的视频会议系统。该系统旨在促进说不同语言的人们之间的对话，从而降低多语言参与者之间的沟通障碍。目前，我们的系统支持4种语言的语音与字幕，并在级联中结合自动语音识别（ASR）与机器翻译（MT）。我们使用重翻译策略翻译流式语音，导致字幕闪烁。此外，我们的系统有非常严格的延迟要求以具备可接受的通话质量。我们实现了若干特性以增强用户体验并降低其认知负荷，例如平滑滚动字幕与减少字幕闪烁。模块化架构允许我们在后端集成不同的ASR与MT服务。我们的系统提供集成评估套件以优化准确性、延迟与擦除等关键内在评估指标。最后，我们提出一种创新跨语言猜词游戏作为外在评估指标来衡量端到端系统性能。我们计划为研究目的开源我们的系统。
引用
@article{arxiv.2109.09576,
title = {Predictions of bound-bound transition signatures in x-ray Thomson scattering},
author = {Andrew D. Baczewski and Thomas Hentschel and Alina Kononov and Stephanie B. Hansen},
journal= {arXiv preprint arXiv:2109.09576},
year = {2021}
}
备注
6 pages, 3 figures. Preprint for PNP17