基于大数据的分析查询解决方案.pdf

下载文档

0
0
约3.49万字
约 43页
2021-08-30 发布于湖北
举报
版权申诉
保障服务

基于大数据的分析查询解决方案.pdf

1、本文档共43页，可阅读全部内容。
2、原创力文档（book118）网站文档一经付费（服务费），不意味着购买了该文档的版权，仅供个人/单位学习、研究之用，不得用于商业用途，未经授权，严禁复制、发行、汇编、翻译或者网络传播等，侵权必究。
3、本站所有内容均由合作方或网友上传，本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺！文档内容仅供研究参考，付费前请自行鉴别。如您付费，意味着您自己接受本站规则且自行承担风险，本站不退款、不进行额外附加服务；查看《如何避免下载的几个坑》。如果您已付费下载过本站文档，您可以点击这里二次下载。
4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等，请点击“版权申诉”（推荐），也可以打举报电话：400-050-0827(电话支持时间：9:00-18:30)。

XX基于大数据的分析查询解决方案文档版本号： V1.0 文档编号：文档密级：归属部门 / 项目：产品部编写人：编写日期： 2017.10.09 XX技术有限公司修订记录：版本号修订人修订日期修订描述 V 3.0 基于大数据的分析查询解决方案目录 1. 项目背景 3 2. 项目需求及目标分析 3 3. 项目方案介绍 3 3.1. 系统架构 4 3.2. 数据存储 5 3.2.1. HDFS 分布式文件系统 5 3.2.2. HBase- 分布列式数据库 7 3.2.3. Hive- 数据仓库 9 3.2.4. GraphDB- 大规模分布式并行图数据库 11 3.3. 数据总线 13 3.3.1. 数据采集与交换 15 3.3.2. 数据预处理 15 3.4. 计算引擎 21 3.4.1. 功能 21 3.4.2. 组成 21 3.4.3. 计算框架 23 3.4.4. 通用算子 23 3.4.5. 专用算子及分析模板 25 3.5. 高性能高可用 28 3.5.1. 高性能 28 3.5.2. 高可用 29 3.6. 业务功能展示 29 3.6.1. 业务定义和业务审核 30 3.6.2. 时空碰撞 33 3.6.3. 综合查询 35 3.6.4. 关系分析 36 3.6.5. 实时监控 38 4. 本期项目性能指标要求 39 1 基于大数据的分析查询解决方案 4.1. 系统性能要求 39 4.1.1. 平台规模