利用词嵌入追踪俄语文化历时语义变迁:测试集与基线
计算与语言
2019-07-31 v2
摘要
本文介绍了用于追踪俄语历时(时间)语义变迁任务的手动标注测试集。这两个测试集互为补充:第一个涵盖从前苏联到苏联时期名词和形容词发生的相对强烈的语义变化,而第二个涵盖2000年至2014年间发生的相对微妙的社会与文化决定的变迁。此外,第二个测试集提供了更细粒度的变迁程度分类,但仅限于形容词。测试集的引入使我们能够评估几种成熟的语义变迁检测算法(将此视为分类问题),其中大多数从未在俄语材料上测试过。所有这些算法都使用在相应领域语料库上训练的分布词嵌入模型。所得分数未来研究解决类似任务提供了可靠的比较基线。我们发布了数据集、代码和训练好的模型,以促进对俄语词汇在不同粒度时间段内自动检测时间语义变迁的进一步研究。
引用
@article{arxiv.1905.06837,
title = {Tracing cultural diachronic semantic shifts in Russian using word embeddings: test sets and baselines},
author = {Vadim Fomin and Daria Bakshandaeva and Julia Rodina and Andrey Kutuzov},
journal= {arXiv preprint arXiv:1905.06837},
year = {2019}
}
备注
Dialogue 2019