数据网格的十大支柱
分布式、并行与集群计算
2024-11-11 v1
摘要
在过去几年中,越来越多的数据平台涌现出来,包括数据共享库、数据存储库和包含生物医学、环境、健康社会决定因素及其他与改善健康结局相关数据的数据库。随着数据平台数量的增加,将多个数据平台互操作以形成数据网格、数据织物和其他类型的数据生态系统,可以减少数据孤岛、扩展数据使用并增加新发现的可能性。在本文中,我们引入了十条原则,我们称之为支柱,用于数据网格。这些原则的目标是:1)使从多个数据平台设置数据网格变得更容易、更快、更统一;2)使数据平台加入一个或多个数据网格变得更容易、更快、更统一。希望通过数据网格实现更广泛的数据可用性将加速研究,而网格的更大统一性将降低开发数据网格和将数据平台连接到它们的成本。
引用
@article{arxiv.2411.05248,
title = {Ten Pillars for Data Meshes},
author = {Robert L. Grossman and Ceilyn Boyd and Nhan Do and Danne C. Elbers and Michael S. Fitzsimons and Maryellen L. Giger and Anthony Juehne and Brienna Larrick and Jerry S. H. Lee and Dawei Lin and Michael Lukowski and James D. Myers and L. Philip Schumm and Aarti Venkat},
journal= {arXiv preprint arXiv:2411.05248},
year = {2024}
}
备注
10 pages, 1 figure