实时数据流处理技术研究与应用.docxVIP

实时数据流处理技术研究与应用

目录

一、文档简述．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．2

二、实时数据流处理基础理论．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．4

数据流模型．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．4

实时数据处理架构．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．6

关键技术概述．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．10

三、流式数据采集与预处理技术．．．．．．．．．．．．．．．．．．．．．．．．．．．．．12

数据源识别与接入．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．12

数据采集协议与技术．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．14

数据预处理方法．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．16

四、高效流式数据存储与管理．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．19

数据存储模型选择．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．19

数据存储优化技术．．．．．．．．．．．．．．．．．．．．．