中文

GLoRIA:用于方言语音识别的 Gated Low-Rank 可解释适配

计算与语言 2026-03-04 v1 人工智能

摘要

方言语音识别 (ASR) 仍然具有挑战性,主要由于区域性差异强大且标注数据有限。我们提出 GLoRIA,一个参数高效的适配框架,利用元数据(如坐标)来调节预训练编码器中低秩更新的门控机制。GLoRIA 在每个 feed-forward 层中注入低秩矩阵,门控 MLP 根据位置元数据确定每个 LoRA 秩-1 成分的非负贡献。在 GCND 语料库上,GLoRIA 在地理条件化完整微调、LoRA 以及方言特定和统一完整微调之间取得了优异的性能,实现了 state-of-the-art 的词错误率,同时更新的仅为不足 10% 的参数。GLoRIA 还能对未见方言实现良好泛化,包括在外推情景中,并可实现可解释的适配模式,通过地理空间方式进行可视化。这些结果表明,元数据门控低秩适配是方言 ASR 中有效、可解释且高效的解决方案。

关键词

引用

@article{arxiv.2603.02464,
  title  = {GLoRIA: Gated Low-Rank Interpretable Adaptation for Dialectal ASR},
  author = {Pouya Mehralian and Melissa Farasyn and Anne Breitbarth and Anne-Sophie Ghyselen and Hugo Van hamme},
  journal= {arXiv preprint arXiv:2603.02464},
  year   = {2026}
}

备注

Accepted to ICASSP 2026. 5 pages