一种用于天文观测数据长期归档的重分布工具
天体物理仪器与方法
2020-06-17 v1
摘要
天文观测数据需要长期保存，且观测数据的快速累积使得有必要考虑长期归档存储的成本。除基于低速磁盘的在线存储外，可使用光盘或基于磁带的离线存储以节省成本。然而，对于需要历史数据（特别是时域天文学）的天文研究，数据访问技术的性能与能耗会带来问题，因为所请求的数据（按观测时间组织）可能横跨多个存储设备。在本研究中，我们设计开发了一款称为 AstroLayout 的工具，利用空间聚合对观测数据进行重分布。其核心算法使用图划分，根据原始观测数据统计信息与目标存储系统生成优化的数据放置。对于给定的观测数据，AstroLayout 可依据该放置将长期归档复制到目标存储系统中。效率评估表明，AstroLayout 能在响应时域天文学研究中的数据访问请求时减少被激活的设备数量。除提升数据访问技术性能外，AstroLayout 还可降低存储系统能耗。为增强适应性，它支持任意介质的存储系统，包括光盘、磁带与硬盘。
引用
@article{arxiv.2006.09188,
title = {A Redistribution Tool for Long-Term Archive of Astronomical Observation Data},
author = {Chao Sun and Ce Yu and Chenzhou Cui and Boliang He and Jian Xiao and Zhen Li and Shanjiang Tang and Jizhou Sun},
journal= {arXiv preprint arXiv:2006.09188},
year = {2020}
}