ArcGIS GeoEvent Server 10.5时空大数据手册.docVIP

ArcGISServer集群搭建教程

PAGE19

网址：技术支持网站：电话：010技术支持热线：400-819-2881

文档编号

000001

版本号

V1.0

范围

■内部□公开

ArcGISGeoEventServer10.5时空大数据存储手册

Esri中国信息技术有限公司

2016年11月

版权声明

本文档版权为Esri中国信息技术有限公司所有。未经本公司书面许可，任何单位和个人不得以任何形式摘抄、复制本文档的部分或全部，并以任何形式传播。

制定及修订记录

版本

完成日期

编写/修订纪要

编写者

备注

1.0

2016.11.7

A

刘升容

第一章

1.0

2016.11.18

A

刘升容

第二、四章

1.0

2016.11.24

A

刘升容

第三章

目录

TOC\o1-3\h\z\u目录 I

一、 时空大数据存储简介 2

1、时空大数据存储历史回顾 2

2、时空大数据存储输出连接器 4

3、使用时空大数据存储的必要条件 5

二、 使用时空大数据存储 6

1、向时空大数据存储中写入数据 6

2、管理时空大数据存储 12

3、可视化时空大数据中的数据 13

三、 时空大数据存储原理 18

1、基于Elasticsearch的高效存储 19

1.1Elasticsearch索引结构解析 19

1.2ArcGISDataStore的时空大数据存储 30

2、时空大数据存储的备份、恢复及磁盘监控 33

2.1时空大数据存储的备份 33

2.2时空大数据存储的恢复 34

2.1时空大数据存储的磁盘空间监控 34

四、时空历史大数据挖掘 34

GeoEvent扩展模块在10.5中正式更名为GeoEventServer，同时，10.4中引进的时空大数据存储使得GeoEventServer在处理实时事件时性能极大提升，并且在10.5中GeoEvent正式与GeoAnalyticsServer对接，存入时空大数据存储中的历史数据将可以使用大数据分析工具进行数据挖掘和分析。

本文档专门阐述时空大数据存储原理、创建和使用方法，以及与GeoAnalyticsServer的对接方法。

时空大数据存储简介

1、时空大数据存储历史回顾

观测数据可以是移动的物体，不断改变属性的静态传感器等等，是GeoEvent中实时数据源的统称。ArcGIS10.4开始通过引进时空大数据存储来处理实时观测数据，时空大数据存储支持大量实时观测数据的归档和写入。

ArcGIS10.2时，实时数据能够接入ArcGIS平台，

基于要素服务轮询等方式，接入速率600e/s

ArcGIS10.3时引入streamservice，可视化效率极大提升，

能快速显示实时流数据，但不能存储历史数据，

关系型数据库中写入的速录极低（200e/s）

ArcGIS10.4引入时空大数据存储，支持分布式部署，每秒可写入的速度

根据节点数不断提升（成千上万e/s），新增动态聚合等多种可视化方式，

历史数据可以被存储，可视化效率进一步提高（4000e/s）

看到这里可能明白，时空大数据存储是ArcGISDataStore具备的一种能力，通过开启时该能力并在GeoEvent创建与之对应的输出连接器与GeoEventServer建立连接。由于时空大数据存储支持分布式部署，并且采用了高效的检索机制，使得GeoEvent接收的实时数据流写入数据库的效率极大提升：

GeoEventServer集群+ArcGISDataStore分布式部署，

大幅提升实时数据的写入和存储速度

在ArcGIS10.4中，存入时空大数据存储中的历史数据支持动态播放，但并不能进一步分析。在ArcGIS10.5中，GeoEventServer与GeoAnalyticsServer对接，存入ArcGISDataStore中的实时历史数据可以通过大数据分析工具进行大数据挖掘分析，实时数据和大数据分析已经无缝结合了。

2、时空大数据存储输出连接器

那么，时空大数据存储与GeoEvent是如何对接的呢？自ArcGIS10.4开始，GeoEventServer提供了2个输出连接器，用来向时空大数据存储中写入实时数据：

AddaFeaturetoanSpatiotemporalBigDataStore：向时空大数据存储中增加新的要素；

UpdateaFeatureinanSpatiotemporalBigDataStore：向时空大数据存储中更新要素。

创建时