替代计量指标是否反映论文质量？来自英国2021年研究卓越框架的证据
数字图书馆
2023-08-01 v1
摘要
替代计量指标（altmetrics）是基于网络的学术论文量化影响力或关注度指标，被提议作为引文计数的补充。本文首次评估了来自 Altmetric.com 和 Mendeley 的成熟替代计量指标与期刊论文质量的关联程度。研究利用了英国2021年研究卓越框架（Research Excellence Framework 2021）中对 2014–17/18 年间所有学科 67,030 余篇期刊论文的专家常模参照同行评审分数，这些论文被划分为 34 个评估单元（UoAs）。结果表明，替代计量指标作为研究质量指标的表现优于此前预期，尽管仍不如原始及学科标准化的 Scopus 引文计数。令人惊讶的是，对引文计数进行学科标准化反而可能削弱其作为单一学科论文质量指标的有效性。对大多数评估单元而言，Mendeley 读者数是最佳指标，推文计数在许多学科中也是相对较强的指标，而 Facebook、博客和新闻引用在某些评估单元（至少在英国）是中等强度的指标。总体而言，替代计量指标在健康与物理科学中作为研究质量指标最强，在艺术与人文中最弱。Altmetric 关注度分数虽为混合指标，但作为质量指标几乎与 Mendeley 读者数相当，并反映了更多的非学术影响力。
引用
@article{arxiv.2212.07811,
title = {Do altmetric scores reflect article quality? Evidence from the UK Research Excellence Framework 2021},
author = {Mike Thelwall and Kayvan Kousha and Mahshid Abdoli and Emma Stuart and Meiko Makita and Paul Wilson and Jonathan Levitt},
journal= {arXiv preprint arXiv:2212.07811},
year = {2023}
}