大数据平台解决方案.docVIP

.

.

.1

...wd.

大数据平台技术方案

TOC\o1-3\h\z\u1.大数据平台技术方案4

1.1技术路线4

1.2动静态信息交换5

1.2.1系统概述5

1.2.2数据采集效劳5

1.2.3数据采集效劳配置6

1.2.4平台认证效劳6

1.2.5动静态数据发布订阅效劳6

1.2.6负载均衡效劳7

1.2.7协议分析转换功能7

1.2.8动静态数据分发效劳7

1.2.9数据分发效劳配置7

1.2.10数据缓存效劳8

1.2.11数据交换信息日志8

1.3大数据存储8

1.3.1数据仓库工具9

1.3.2大数据在线存储9

1.3.3大数据离线存储11

1.4数据清洗转换13

1.4.1流数据处理框架13

1.4.2分布式ETL工具13

1.4.3ET