航空事故报告的主题建模分析：LDA 与 NMF 模型的比较研究
计算与语言
2024-03-11 v1
摘要
在当今世界，航空安全至关重要，人们持续致力于减少事故并提高安全标准。这一努力的核心是对航空事故报告的分析，这些丰富的文本资源蕴含了对航空事故背后原因和促成因素的深刻见解。本文在航空事故报告分析的背景下，比较了两种突出的主题建模技术：潜在狄利克雷分配（LDA）和非负矩阵分解（NMF）。该研究利用了国家运输安全委员会（NTSB）数据集，主要目标是自动化并简化识别事故报告中潜在主题和模式的过程。使用连贯性值（C_v）指标来评估生成主题的质量。LDA 表现出更高的主题连贯性，表明主题内词语之间具有更强的语义相关性。同时，NMF 在生成独特且细粒度的主题方面表现出色，能够更集中地分析航空事故的具体方面。
引用
@article{arxiv.2403.04788,
title = {Topic Modeling Analysis of Aviation Accident Reports: A Comparative Study between LDA and NMF Models},
author = {Aziida Nanyonga and Hassan Wasswa and Graham Wild},
journal= {arXiv preprint arXiv:2403.04788},
year = {2024}
}
备注
6 pages, 12 figures, 2 tables