平方公里阵列:在 IRIS 上处理海量 MeerKAT 数据
天体物理仪器与方法
2023-04-18 v2 分布式、并行与集群计算
摘要
天文数据处理往往在数据管理与数据处理方面带来巨大挑战。MeerKAT 望远镜是世界最大天文台——平方公里阵列的先导望远镜之一。迄今为止,MeerKAT 数据使用南非计算设施即 IDIA 进行处理,并已被用于取得突破性发现。然而,要在英国 IRIS 计算设施上处理 MeerKAT 数据,需要重新实现 MeerKAT 流水线。本文聚焦于如何将 MeerKAT 数据从南非站点传输至英国 IRIS 系统进行处理。我们讨论了用于将 MeerKAT 数据从南非传输至英国的 RapifXfer 数据传输框架,以及针对英国 IRIS 资源的 MeerKAT 作业处理框架。
引用
@article{arxiv.2105.14613,
title = {Square Kilometre Array : Processing Voluminous MeerKAT Data on IRIS},
author = {Priyaa Thavasimani and Anna Scaife},
journal= {arXiv preprint arXiv:2105.14613},
year = {2023}
}
备注
arXiv admin note: This article has been withdrawn due to an unresolvable internal author dispute