大规模数据处理框架优化策略探讨.docxVIP

大规模数据处理框架优化策略探讨

目录

一、文档综述．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．2

1.1研究背景与意义．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．2

1.2研究目的与内容．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．4

1.3论文结构安排．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．6

二、大规模数据处理概述．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．8

2.1大数据定义与特点．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．8

2.2大数据处理流程简介．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．9

2.3当前主流的大数据处理框架．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．10

三、数据处理框架优化基础．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．10

3.1性能评估指标介绍．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．11

3.2优化原则与方法论概述．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．12

3.3关键