一种基于内容的学术出版物新颖性度量:概念验证
计算与语言
2024-01-17 v2 数字图书馆
摘要
新颖性,类似于进化中的基因突变,为学术进步开辟了可能性。尽管同行评审仍然是评估学术交流和资源分配中新颖性的黄金标准,但海量的投稿数量使得对学术新颖性进行自动化度量成为必要。我们采用将新颖性视为现有知识的非典型组合的视角,引入了一种基于信息论的学术出版物新颖性度量方法。该度量方法量化了代表学术话语词分布的语言模型所感知到的“意外”程度。所提出的度量方法附有表面效度和构念效度证据;前者证明了其与科学常识的对应性,后者则通过其与一组精选领域专家所做的新颖性评估的一致性得到认可。此外,该度量方法具有可解释性、细粒度和易获取性的特点,弥补了现有方法中普遍存在的不足。我们相信,这一度量方法具有巨大潜力,能够惠及编辑、利益相关者和政策制定者,并为审视新颖性与学术动态(如创造力、跨学科性和科学进步)之间的关系提供了一个可靠的视角。
引用
@article{arxiv.2401.03642,
title = {A Content-Based Novelty Measure for Scholarly Publications: A Proof of Concept},
author = {Haining Wang},
journal= {arXiv preprint arXiv:2401.03642},
year = {2024}
}
备注
Accepted for publication in the proceedings of iConference2024