基于大数据的水利水电云GIS平台概述.pdfVIP

第４４卷 增刊（１） 人　民　长　江 Ｖｏｌ．４４，Ｓｕｐｐｌｅｍｅｎｔ（ ） Ⅰ ２０１３年 ６月　 　 Ｙａｎｇｔｚｅ　Ｒｉｖｅｒ　 　 Ｊｕｎｅ， ２０１３ 　　文章编号：１００１－４１７９（２０１３）Ｓ１－０１８２－０３ 基于大数据的水利水电云ＧＩＳ平台概述 １，２ ２ 王喜 春 ，孙 志 禹 （１．长江勘测规划设计研究院 长江空间信息技术工程有限公司，湖北 武汉４３００１０；　２．中国长江三峡集团公 司 科技与环境保护部，北京 １０００３８） 摘要：随着信息技术的飞速发展和云计算概念的提出，常规的应用服务平台已远远不能满足水利水电地理信 息系统（ＧＩＳ）的全方位要求，需要有一个强大的基础架构为各种应用服务提供支撑。介绍了大数据的定义及 其特点。基于面向服务的体系架构，结合 ＧＩＳ和云计算，提出了水利水电工程中云 ＧＩＳ平台的体系架构。介 绍了水利水电工程云 ＧＩＳ平台实现的关键技术，如与传统数据仓库工具的整合技术、实时数据的处理技术等。 关　键　词：大数据；云 ＧＩＳ平台；信息技术；水利水电工程 中图法分类号：ＴＰ３９１　　　文献标志码：Ａ 字领域存在着 １．８万亿 ＧＢ的数据，其数据量正在以 １　大数据简介 ５５％的速度逐年增长。 １．１　大数据的定义 （２）数据类型繁多。数据可分为结构化数据、半 结构化数据和非结构化数据。相对于以往便于存储的 按照现在较为普遍的定义，大数据是诞生于各类 以文本为主的结构化数据，音频、视频、图片、地理位置 终端中的庞大的分结构化数据，而拥有存储、分析该类 信息等类型的非结构化数据量占比达到８０％左右，并 数据能力的技术就是大数据技术。大数据技术包括基 在逐步提升，有用信息的提取难度不断增大。 础架构、数据管理、分析挖掘和决策支持四个层面。大 （３）价值密度低。价值密度的高低与数据总量的 数据的关键是在种类繁多，数量庞大的数据中，快速获 大小成反比。以视频为例，一部 １ｈ的视频，在连续不 取信息。 间断监控过程中，可能有用的数据仅仅只有一两秒。 大数据和云计算密不可分，相互促进发展。云计 （４）时效性高。这是大数据区分于传统数据挖掘 算首先要进行数据的收集，而大数据是数据分析能力 最显著的特征。数据的价值除了与数据规模相关，还 的升级。大数据和云计算都需要有庞大的数据存储和 与数据处理周期成正比关系，而数据处理的速度越快 计算能力作为支撑。将计算资源集中以实现规模效应 （比如 １ｓ内）、越及时，其价值越大，发挥的效能越大。 是信息产业发展的必然结果，对于没有大规模数据中 心，但又需要对大规模数据进行存储和计算的企业，可 ２　大数据与水利水电云 Ｇ