面向电力应用的基于Hadoop的分布式计算平台研究-计算机技术专业毕业论文.docxVIP

华北电力大学硕士学位论文摘 华北电力大学硕士学位论文 摘 要 随着智能电网的加速建设，电网规模迅速扩大，配电网的结构更加复杂， 电力数据冗余度显著增高，这一系列变化的出现，使得当前电力系统中所使用 的各种配电网高级应用计算软件出现瓶颈，建设一种能够提供安全、稳定、高 效运行的管理软件成为当务之急。 自云计算概念提出以来，各大互联网公司和实验室竞相展开深入研究并将 其应用到各个生产领域。Hadoop平台作为云计算处理工具中发展迅速的一款开 源软件，具备高效的并行计算能力和稳定的分布式存储能力，本文对此平台展 开研究并尝试用其解决配电网中存在的各类复杂任务。 结合配电网高级应用计算任务的特点，当需要对大量配电网线路的状态进 行计算分析的时候，Hadoop平台自带的负载均衡机制存在着明显的不足，本文 由此提出使用智能优化算法一一细菌觅食算法(Bacteria Foraging Algorithm， BFA)处理解决负载均衡的问题，并分析实际情况中大规模集群存在的各类因 素，提出了一种改进的多目标细菌觅食算法(Improved multi．Objective BFA， IMOBFA)，综合考虑了影响Hadoop集群处理任务时的多个方面。通过利用云 计算仿真软件CloudSim对Hadoop运行环境的模拟，对比了IMOBFA算法和传 统MOBFA算法在大规模集群中处理海量任务时的效果，实验结果表明，前者 具有比较明显的优势。 本文在实验室环境下搭建了小规模的Hadoop集群，使用来自华东地区某 省的配电网数据，将修改过负载均衡策略的Hadoop平台与已经投入电力系统 生产环境下的基于ZeroMQ的分布式计算平台进行了对比。当配电网数据达到 一定数量的时候，本文搭建的Hadoop平台在计算速度上有着显著的提高。此 外，由于Hadoop平台自身具备分布式存储的特性，相比传统的一些计算平台， 更能提高数据存储的安全性，这对未来智能电网的建设提供了大数据分析的基 础。 关键词：智能配电网：Hadoop平台；多目标细菌觅食算法：负载均衡 万方数据 华北电力大学硕士学位论文Abstract 华北电力大学硕士学位论文 Abstract With the acceleration construction of the smart grid，the grid has expanded rapidly,the structure of power system has be more complex，and the data has increased significantly．The emergence of this series of changes makes the development of computation software used in power system encounter a bottleneck． Hence，building a safe，stable and efficient management software has become a top priority． Since the concept of cloud computing is proposed，it has been studied and applied into several areas by major Internet companies and laboratories．Hadoop is an open source platform which belongs to cloud computing processing tool with efficient parallel computing power and stability of distributed storage capability．In this paper,we study this platform and try to use it to slove various types of complex tasks in distributed power system． Considering the characteristics of computation tasks in distributed power system， the default load balancing strategy in Hadoop can not perform large—scale computing． This paper proposes an improved multi-objective intelligent optimizati