面向高性能数据密集型计算的安全、高效数据传输与副本管理
分布式、并行与集群计算
2007-05-23 v1 数据库
摘要
一种新兴的数据密集型应用涉及从地理分布广泛的大型数据集合中抽取复杂科学信息。此类应用例如实验物理学，其中数据由加速器生成；也如仿真科学，其中数据由超级计算机生成。所谓 Data Grid 提供了类似于互联网为电子邮件和网页等应用提供必需服务的基本设施。我们在此描述两种我们认为对任何 Data Grid 必不可少的服务：可靠的高速传输与副本管理。我们的高速传输服务 GridFTP 扩展了流行的 FTP 协议，加入了数据密集型应用所需的新功能，如条带化和局部文件访问。我们的副本管理服务将副本目录与 GridFTP 传输集成，提供数据副本的创建、注册、定位与管理。我们present both services的设计，并介绍初步的性能结果。我们的实现利用 Globus Toolkit 提供的安全等其他服务。
引用
@article{arxiv.cs/0103022,
title = {Secure, Efficient Data Transport and Replica Management for High-Performance Data-Intensive Computing},
author = {Bill Allcock and Joe Bester and John Bresnahan and Ann L. Chervenak and Ian Foster and Carl Kesselman and Sam Meder and Veronika Nefedova and Darcy Quesnel and Steven Tuecke},
journal= {arXiv preprint arXiv:cs/0103022},
year = {2007}
}
备注
15 pages