大数据平台的高效架构设计方法.docxVIP

大数据平台的高效架构设计方法

目录

内容概要．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．2

大数据平台架构基础理论．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．3

2.1大数据系统核心特征．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．3

2.2架构设计的基本原则．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．5

2.3常见架构范式比较．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．6

平台架构设计的关键要素．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．9

3.1数据采集与整合方案．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．9

3.2数据存储与管理策略．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．11

3.3计算资源分配与优化．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．15

3.4数据处理与分析引擎选择．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．18

高效架构的技术实现路径．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．21

4.1分布式存储系统的构建．．．．．．．．．．