宽带 VLBI 相关处理在云端的前景
天体物理仪器与方法
2021-03-16 v1
摘要
本文提出一种用于宽带 VLBI 数据相关的云架构。云相关处理利用灵活分配且 practically 无限的计算资源并行处理整个实验。该方法相较于专用的相关处理集群具有潜在改进，后者受限于固定数量的已安装处理节点与回放单元。此外，云存储提供了替代维护可能间歇使用的硬盘驱动器机群的方案。我们描述了使用 Google Cloud Platform 上的 DiFX-2.5.2 软件进行 VLBI 相关处理的基准测试，以评估基于云的相关处理性能。改变每台虚拟机的虚拟 CPU 数量以确定云资源的最优配置。改变站点数量以确定相关处理时间随不同规模 VLBI 阵列的扩展关系。还测量了从 Google Cloud Storage 到执行相关处理的虚拟机的数据传输速率。我们也给出一个示例云相关处理配置。利用当前的云服务与设备定价数据编制成本估算，以便对云与集群处理进行近似经济比较。经济比较基于作为移动靶标的成本数字，且高度依赖于诸如集群与介质利用率等因素，这些难以估算。我们的模型表明，转向云端是高数据率、低占空比宽带 VLBI 相关处理的一条应持续探索的替代路径。在 VLBI 相关处理的生产阶段，云有潜力显著缩短数据处理时间，并能在给定年份处理更多科学实验，以应对天文学与测地 VLBI 应用中日益常见的 PB 级数据集。
引用
@article{arxiv.1908.03991,
title = {Prospects for Wideband VLBI Correlation in the Cloud},
author = {Ajay Gill and Lindy Blackburn and Arash Roshanineshat and Chi-Kwan Chan and Sheperd S. Doeleman and Michael D. Johnson and Alexander W. Raymond and Jonathan Weintroub},
journal= {arXiv preprint arXiv:1908.03991},
year = {2021}
}
备注
14 pages, 6 figures, accepted for publication in the Publications of the Astronomical Society of the Pacific journal