词熟悉度与词频
计算与语言
2018-06-12 v1
摘要
词频被假定与词熟悉度相关，但该相关性的强度尚未得到充分研究。本文中，我们报告了对通过心理语言学实验获得的词熟悉度评分列表与来自不同种类及规模（高达 TB 级）的英语和日语语料库的 log-frequency 之间相关性的分析。主要发现有三点：第一，对给定语料库，熟悉是词达到高频的必要条件，但熟悉词未必高频。第二，相关性随语料库数据规模增大而增强。第三，口语语料库比书面语语料库相关性更好。这些发现表明认知熟悉度评分与频率相关，且与口语频率的相关性高于书面语频率。
引用
@article{arxiv.1806.03431,
title = {Word Familiarity and Frequency},
author = {Kumiko Tanaka-Ishii and Hiroshi Terada},
journal= {arXiv preprint arXiv:1806.03431},
year = {2018}
}
备注
17 pages, 8 figures, Published in Studia Linguistica in 2011. Available also from Wiley Online Library