面向智能电表数据分析的混合 ICT 解决方案

智能电表在全球范围内的使用日益广泛。智能电表是能够在细粒度时间间隔（例如每 15 分钟）测量能耗的先进电表。在分析中，智能电表数据通常与社会经济数据（如电表地理位置、天气状况和用户信息）捆绑在一起，这使得数据集非常庞大且分析过程复杂。数据挖掘和新兴的云计算技术使得收集、处理和分析所谓的大数据成为可能。本文提出了一种创新的 ICT 解决方案以简化智能电表数据分析。所提出的解决方案提供了一个用于摄取智能电表数据的信息集成流水线、一个用于处理和挖掘大数据集的可扩展平台，以及一个用于可视化分析结果的网络门户。所实现的系统采用混合架构，使用 Spark 或 Hive 进行大数据处理，并使用机器学习工具包 MADlib 在 PostgreSQL 数据库中进行库内数据分析。本文评估了所提 ICT 解决方案的关键技术，结果表明该系统在批处理和在线分析中均具有有效性和高效率。