Objectivity 数据迁移
高能物理 - 实验
2007-05-23 v1
摘要
在本文中,我们描述了在 CERN 由 COMPASS 和 HARP 实验收集的事件数据的迁移。这两个实验总共在 Objectivity/DB 中存储了超过 300TB 的物理数据,这些数据必须分别在 2003 年第一季度末和第二季度末之前转移到新的数据管理系统。为了实现这一目标,数据需要以接近 100MB/s 的速度处理,使用 14 个磁带驱动器和 30 台 Linux 服务器组成的集群。容纳数据的新持久性解决方案建立在用于元数据存储的关系数据库和用于事件数据的标准“平面”文件之上。数据库包含 10^9 个事件的集合,并允许通用查询或对数据的直接导航访问,同时保留原始的 C++ 用户 API。CERN 的中央数据存储库使用 Linux 上的多个 Oracle9i 服务器和 CERN 海量存储系统 CASTOR 实现。
引用
@article{arxiv.hep-ex/0305097,
title = {Objectivity Data Migration},
author = {Marcin Nowak and Krzysztof Nienartowicz and Andrea Valassi and Magnus Lubeck and Dirk Geppert},
journal= {arXiv preprint arXiv:hep-ex/0305097},
year = {2007}
}
备注
Talk from the 2003 Computing in High Energy and Nuclear Physics (CHEP03), La Jolla, Ca, USA, March 2003, 7 pages, PDF. PSN THKT001