BOSS-LDG:一种连接 Blue Waters、Open Science Grid、Shifter 和 LIGO 数据网格以加速引力波发现的新型计算框架
分布式、并行与集群计算
2017-11-30 v1
摘要
我们提出了一种新颖的计算框架,该框架通过Open Science Grid技术,将NCSA运营的NSF支持的领导级超级计算机Blue Waters与激光干涉引力波天文台(LIGO)数据网格连接起来。为了实现这一计算基础设施,我们首次配置了一个LIGO数据网格一级中心,该中心能够使用Open Science Grid设施提交异构的LIGO工作流。为了实现LIGO数据网格通过Open Science Grid与Blue Waters的无缝连接,我们利用Shifter将LIGO的工作流软件容器化。这项工作代表了Open Science Grid、Shifter和Blue Waters首次被统一起来解决科学问题,特别是,这是此类框架首次用于大规模引力波数据分析的背景下。这个新框架已在LIGO第二次发现活动的最后几周中使用,在Blue Waters上运行计算要求最高的引力波搜索工作流,并加速了引力波天体物理学这一新兴领域的发现。我们讨论了这一新颖框架对更广泛的高性能计算用户生态系统的影响。
引用
@article{arxiv.1709.08767,
title = {BOSS-LDG: A Novel Computational Framework that Brings Together Blue Waters, Open Science Grid, Shifter and the LIGO Data Grid to Accelerate Gravitational Wave Discovery},
author = {E. A. Huerta and Roland Haas and Edgar Fajardo and Daniel S. Katz and Stuart Anderson and Peter Couvares and Josh Willis and Timothy Bouvet and Jeremy Enos and William T. C. Kramer and Hon Wai Leong and David Wheeler},
journal= {arXiv preprint arXiv:1709.08767},
year = {2017}
}
备注
10 pages, 10 figures. Accepted as a Full Research Paper to the 13th IEEE International Conference on eScience