变革的几十年：NASA天体物理数据系统基础设施的演变
天体物理仪器与方法
2024-01-19 v1 数字图书馆
摘要
NASA天体物理数据系统(ADS)是天文学和天体物理学研究人员的主要数字图书馆门户。在过去30年中，ADS已从一个专注于天文学的文献数据库发展成为一个支持空间科学以及(很快)地球科学研究的开放数字图书馆系统。本文描述了ADS系统的演变、其能力以及支撑它的技术基础设施。我们概述了ADS的原始架构，该架构主要围绕简单的数据库模型构建。这个定制系统允许高效索引元数据和引文、数字化和存档全文文章，以及在商用硬件上快速开发特定学科的能力。2010年代末向基于云的微服务架构和开源搜索引擎的转变标志着一个重大转变，带来了全文搜索能力、现代API、更高的正常运行时间、更可靠的数据检索以及高级可视化和分析功能的集成。另一个关键的演变是机器学习(ML)和自然语言处理(NLP)算法在我们的数据管道中逐步且持续地融入。最初用于信息提取和分类任务，NLP和ML技术现在正被开发用于改进元数据丰富、搜索、通知和推荐。我们描述了这些计算技术如何嵌入到我们的软件基础设施中、面临的挑战以及获得的收益。最后，我们通过描述ADS的未来前景及其持续扩展来总结，讨论了在人工智能和开放科学时代管理跨学科信息系统所面临的挑战，在这个时代信息丰富、技术变革，但其可信度却难以捉摸。
引用
@article{arxiv.2401.09685,
title = {Decades of Transformation: Evolution of the NASA Astrophysics Data System's Infrastructure},
author = {Alberto Accomazzi},
journal= {arXiv preprint arXiv:2401.09685},
year = {2024}
}
备注
10 pages, 3 figures, submitted to the ADASS 2023 proceedings