Hadoop在城市公共交通大数据时空分析中的应用.docxVIP

Hadoop在城市公共交通大数据时空分析中的应用

目录

Hadoop在城市公共交通大数据时空分析中的应用（1）．．．．．．．．．．．．3

一、内容描述．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．3

背景介绍．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．4

1.1大数据时代下的城市公共交通挑战．．．．．．．．．．．．．．．．．．．．．．．．．4

1.2Hadoop技术在大数据处理中的应用．．．．．．．．．．．．．．．．．．．．．．．．．6

研究目的与意义．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．7

二、城市公共交通大数据概述．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．8

数据来源．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．12

1.1公交卡数据．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．13

1.2智能公交设备数据．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．14

1.3其他相关数据．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．15

数据特点．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．16

2.1数据量大．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．17

2.2数据类型多样．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．21

2.3数据实时性强．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．22

三、Hadoop技术介绍及其在公共交通大数据中的应用．．．．．．．．．．．．23

Hadoop技术概述．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．25

Hadoop在城市公共交通大数据中的应用场景．．．．．．．．．．．．．．．．．27

2.1数据存储管理．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．29

2.2数据处理分析．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．33

2.3数据可视化展示．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．34

四、基于Hadoop的城市公共交通大数据时空分析流程与方法研究．．35

Hadoop在城市公共交通大数据时空分析中的应用（2）．．．．．．．．．．．37

一、内容综述．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．37

1.1研究背景与意义．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．37

1.2研究目的与内容．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．38

1.3研究方法与技术路线．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．42

二、城市公共交通大数据概述．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．43

2.1城市公共交通数据来源与类型．．．．．．．．．．．．．．．．．．．．．．．．．．．．44

2.2数据量与数据特点．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．45

2.3数据预处理与存储．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．46

三、Hadoop生态系统简介．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．48

3.1Hadoop核心组件．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．51

3.2其他常用Hadoop组件．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．51

3.3Hadoop生态系统优势．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．53

四、Hadoop在城市公共交通大数据时空分析中的应用．．．．．．．．．．．．54

4.1数据导入与存储．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．55

4.2数据处理与分析．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．56

4.3结果可视化与展示．．．．．．．．．．．．．