使用 Hadoop 的云计算环境中的大数据分析
分布式、并行与集群计算
2016-10-17 v1
摘要
大数据管理目前是一个问题。大数据增长非常快。由于其各种特征,很难进行管理。本手稿聚焦于使用 Hadoop 的云计算环境中的大数据分析。我们根据体量、价值、多样性和速度等特征对大数据进行了分类。我们根据数据的体量、速度、价值和多样性制作了各种处理节点。在本工作中,我们对输入数据进行分类并将其路由到各种处理节点。最后,在每个节点处理之后,我们可以组合所有节点的输出以获得最终结果。我们使用 Hadoop 对数据进行分区以及处理。
引用
@article{arxiv.1610.04572,
title = {Big Data Analytics in Cloud environment using Hadoop},
author = {Mansaf Alam and Kashish Ara Shakil},
journal= {arXiv preprint arXiv:1610.04572},
year = {2016}
}
备注
conference paper ICMPAS-2016