电力大数据中信息化工具的应用与探索.pdfVIP

第34卷第5期 四 川 水 力 发 电 Vo1．34．No．5 2015年 10月 Sichuan Water Power Oct．．20 15 电力大数据 中信息化工具的应用与探索 曾 愚 (国网四川省电力公司信息通信公司，四川成都 610041) 摘 要：坚强的智能电网能够运用先进的通信、信息等技术来实现完全 自动化的电力传输，能够监控每个电网节点与用户节 点，并且在电力传输的整个网络中能够保证信息和电能的双向流动。而我国的智能电网发展还处于起步阶段，因此，选择合 适的信息化工具可以极大地加快智能电网信息化的建设进程。 关键词：电力；大数据；信息系统；智能电网 中图分类号：TM73；TP39；TN8；TM93 文献标识码： B 文章编号：1001-2184(2015)05-0100-04 1 概 述 是 HadoopDistributeFileSystem(以下简称HDFS) 随着互联网、物联网和云计算技术的应用和 和 MapReduce，其特点如下 J： 普及 ，各类数据 的规模均呈现出爆发性增长的态 (1)高容错性：文件 的所有数据块都会保留 势，数据的存储单位也从过去的GB、TB上升到 对应的副本，并且每个文件 的数据块大小和副本 PB、EB甚至是 ZB级别 。在动辄数千 PB的数据 系数都是可配置的。 面前，过去常用的信息化工具和系统已无法满足 (2)高数据一致性：所有文件都是一次性写 对这些数据进行分析、处理的需求。另一方面，越 入的，并且严格要求在任何时候只能有一个写 来越多的政府、企业开始关注、了解和接受大数据 入者。 的概念 ，并尝试运用大数据技术来协助它们进行 (3)低成本性：Hadoop是开源的并且可部署 决策层面的分析与预测 ¨。 在普通的PC服务器上，企业可 以通过购买一定 而在未来竞争和机遇都倍增的大数据 “互联 数量的PC服务器就可以建立起一个大数据集 网+”时代，若要紧跟市场的步伐，甚至走在市场 群，用于替代价格昂贵的小型机服务器。 的前列，对电力企业而言，就必须根据适合 自身行 (4)数据的高可靠性：，Hadoop会采取将同一 业特点，选择能够最大限度地适合与满足 电力生 个文件的块副本同时分别存储到已互联的另几台 产需求的各类信息化工具和技术来解决在其发展 设备上来防止某台设备故障或网络通信问题而导 中遇到的各类 问题 。 致的无法读取的问题，从而有效地提升了系统数 2 大数据时代中的信息化工具 据的可靠性。 2．1 Hadoop工具 2．1．1 Hadoop工具的内容 (5)高效性：Hadoop将大型数据集进行分解 Hadoop是由Apache基金会开发的分布式系 至数个 小型数据集并发送到多个节点 (Data 统基础架构 。作为开源系统，Hadoop在当今互联