基于文件级无限滑动窗口技术的增强型远程天文归档系统
天体物理仪器与方法
2021-12-08 v1
摘要
数据归档是现代天文观测中最关键的问题之一。随着新一代射电望远镜的发展,海量远程数据的传输与归档已成为亟待解决的紧迫问题。本文参考TCP协议中的经典流控方法,提出一种实用且稳健的文件级流控方法,称为无限滑动窗口(Unlimited Sliding-Window, USW)。基于USW以及为Murchison Widefield Array望远镜开发的下一代归档系统(Next Generation Archive System, NGAS),我们进一步使用ZeroMQ中间件实现了一种增强型归档系统(ENGAS)。ENGAS大幅提升了传输性能并确保了传输文件的完整性。测试表明,ENGAS比NGAS快约3至12倍,且能充分利用网络链路的带宽。因此,在射电观测数据归档方面,ENGAS减少了通信时间,提高了带宽利用率,并解决了明安图 spectral radioheliograph 等观测站的远程同步归档问题。它也为未来平方公里阵列(Square Kilometer Array, SKA)科学区域中心的构建提供了更好的参考。
引用
@article{arxiv.2106.12769,
title = {Enhanced Remote Astronomical Archive System Based on the File-Level Unlimited Sliding-Window Technique},
author = {Cong-Ming Shi and Hui Deng and Feng Wang and Ying Mei and Shao-Guang Guo and Chen Yang and Chen Wu and Shou-Lin Wei and Andreas Wicenec},
journal= {arXiv preprint arXiv:2106.12769},
year = {2021}
}
备注
11 pages, 10 figures