AlertMix:面向多源流数据的大数据平台
分布式、并行与集群计算
2018-06-27 v1 信息检索
摘要
对流式处理的需求正以空前的速度增长。大数据不再局限于对海量数据的处理。在大多数现实场景中,只有对到来的流数据进行处理才能满足业务需求。交易、欺诈检测、系统监控、产品维护以及诸如 Twitter 和 YouTube 视频等社交媒体数据都需要此类处理。在这种情况下,侧重于批处理的“迟来架构”无法实现这些用例。本文提出一个端到端的大数据平台 AlertMix,用于处理多源流数据。本文阐述了其架构以及如何利用各种大数据技术。我们给出了该平台在真实实时流数据上的性能表现,这些流数据目前正由该平台处理。
引用
@article{arxiv.1806.10037,
title = {AlertMix: A Big Data platform for multi-source streaming data},
author = {Ayush Singhal and Rakesh Pant and Pradeep Sinha},
journal= {arXiv preprint arXiv:1806.10037},
year = {2018}
}
备注
9 pages, 4 figures