跨语言认知洞察：增强多模态访谈分析

认知衰退是随年龄增长而自然发生的过程。及早诊断异常性衰退对于启动能够提升受影响者生活质量的专业治疗至关重要。为此，我们提出了一种能够预测轻度认知功能障碍和认知评分的多模态模型。采用 TAUKADIAL 数据集进行评估，该数据集包含临床访谈的音频记录。该模型演示了能够转录并区分访谈中使用的不同语言的能力。随后，模型提取音频和文本特征，将其整合到多模态架构中，以实现稳健和通用的结果。我们的方法通过深入研究来实施来自所提出模态的各种特征。