检测对话中的其他发起修复请求
计算与语言
2025-10-29 v1
摘要
维持互惠理解是人类人类对话中的关键组成部分,以避免对话中断,其中修复,特别是Other-Initiated Repair(OIR,当一个说话者发出困扰信号并提示另一个说话者解决时发挥关键作用)。然而,对话代理(CAs)仍然无法识别用户修复发起,导致中断或退出。本工作提出一种多模态模型,用于自动检测荷兰语对话中的修复发起,通过整合基于对话分析的语言和韵律特征。结果表明,韵律线索补充语言特征并显著提高预训练文本和音频嵌入的性能,提供关于不同特征如何相互作用的见解。未来方向包括纳入视觉线索、探索多语言和跨语境语料库以评估鲁棒性和可移植性。
引用
@article{arxiv.2510.24628,
title = {"Mm, Wat?" Detecting Other-initiated Repair Requests in Dialogue},
author = {Anh Ngo and Nicolas Rollet and Catherine Pelachaud and Chloe Clavel},
journal= {arXiv preprint arXiv:2510.24628},
year = {2025}
}
备注
9 pages