大数据对电力企业信息化发展探索与研究.docVIP

大数据对电力企业信息化发展探索与研究 　　一、引 言 　　（一）定义及其特征 　　大数据一词自诞生以来就一直是一个模糊而诱人的概念，特别是最近几年，它已经成为了一个信息时代的新兴主题。1980年，阿尔文.托夫勒曾在《第三次浪潮》书中将大数据赞颂为“第三次浪潮的华彩乐章” ，从2009年起大数据这个词开始频繁出现在互联网信息技术行业中，2010年Apache Hadoop组织认为大数据是指“普通的计算机软件无法在可接受的时间范围内捕捉、管理、处理的规模比较庞大的数据集合” ，在维基百科可查到“大数据就是那些无法在可承受的时间范围内，运用常规软件工具进行捕捉、管理和处理的数据集合”。综上所述，大数据是指量大、复杂、增长迅速的数据集合，也指无法在一定时间内用传统数据库软件工具对其内容进行抓取、管理和处理的数据集合，它涵盖了数据从产生、采集、存储、加工、转换、计算、分析挖掘、展示到最后被使用等数据全生命周期管理过程，以及这一系列过程中所使用的各项技术和理念。 　　维克托.迈尔-舍恩伯格和肯尼斯.库克耶曾在《大数据时代》中提到过“大数据指不用随机分析法（抽样调查）这样的捷径，而采用所有数据的方法。”与传统数据相比，大数据有传统的结构化数据，还有半结构化数据、多维数据及音视频数据，数据的量级已从TB上升为PB、EB乃至ZB（1024GB=1TB，1024TB=1PB，1024PB=1EB，1024EB=1ZB）。IDC研究表明，数据量正以每年60%的增长率持续增长，换句话说在过去两年产生的数据已经达到历史产生的全部数据的90%，预计到2020年，全球数据总规模将增长44倍，达到35.2ZB。 　　从上述可知，大数据具有多样（Variety）、量大（Volume）、高速（Velocity）、价值（Value）的特性，即所谓的4V特性。2013年3月13日，IBM发布白皮书《分析：大数据在现实世界中的应用》，将大数据4V理论的最后一个V价值（Value）重新定义为真实（Veracity），IBM认为真实性是当前企业需重点考虑的维度，是促进企业有效利用数据本身和分析方法进而提升数据价值的必要手段，该理论提出了一个闭合的大数据体系，最终呈现出应用层、工具层、数据管理层和数据层四层架构。 　　（二）国内外发展趋势 　　2010年美国率先颁布“云第一”政策，要求各机构必须在投资前对云计算选项进行安全性评估，2011年2月，美国政府发布《联邦云计算战略》白皮书，宣布将在2012年投资800亿元联邦IT预算，这也使得美国成为全球第一个发布云计算战略的国家，2012年3月29日，美国政府推出执行“大数据研发计划”，提出“通过提高从大型复杂的数字数据集中提取知识和观点的能力，承诺帮助加快在科学与工程中的步伐，加强国家安全，并改变教学研究”。2013年2月6日，美国国家科学基金会等10余家国际研究基金会启动第三轮“数据挖掘挑战”计划，鼓励社会人文科学领域中大数据研究的意义，探讨大数据是如何改变社会人文科学领域的研究状态。近年来，日本政府也在积极探索大数据发展，提出了“有效利用信息技术开创大数据新产业”的发展战略。 　　相比之下，中国大数据产业发展迅猛。2012年2月14日，我国工业和信息化部正式发布《十二五 物联网发展规划》，规划中把信息处理技术作为4项关键技术创新工程之一，其中包括了海量数据存储、数据挖掘、图像视频智能分析，这都是“大数据”的重要组成部分，而另外3项关键技术创新工程，包括信息感知技术、信息传输技术、信息安全技术，也都与大数据密切息息相关。随着信息化建设的深入推进，大数据时代已经在生物医药、通信、互联网等行业得到体现，如阿里巴巴利用大数据分析颠覆传统零售业，利用网站统计数据通过用户行文分析，建立了用户行为模型，掀起了网络精准营销模式的新篇章；腾讯在天津建立亚洲最大的数据中心，建成大中华局最牛IDC机房；百度也随后在阳泉投资建立百度云计算数据处理中心；新浪紧跟步伐推出企业微博，提供精准的数据分析服务等等。 　　因此，无论从国家政策要求，各行业竞争形势所趋，还是从企业战略发展的角度分析，大数据已成为信息化发展的必然选择。 　　二、电力大数据研究现状 　　（一）电力大数据概述 　　随着全球信息化建设步伐，电力企业已坚定的步入了电力大数据时代。电力大数据是综合电力企业生产、管理运营、智能电网3个领域数据的信息系统，也是近年来电力发展的重要方向之一，主要具有以下显著特点： 　　1. 数据量大。随着电力企业信息化新兴技术的不断推进，智能电网自动化、互动化建设不断加强，数据量由TB级向PB级急剧增长。 　　2. 类型多样。电力大数据所涉及的种类包括结构化数据、半结构化以及非结构化数据、视频音频等多种类型。 　　3. 速度较快。