199-实时数据仓库建设体系.pdf

  1. 1、本文档共32页,可阅读全部内容。
  2. 2、原创力文档(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
  3. 3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载
  4. 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
查看更多

实时仓库建设体系

目标

l通过学习本课程,您将能够:

p了解实时数据仓库定义与特点

p了解不同架构如何构建实时数仓

p掌握数梦实时仓库的体系架构

目录

1.实时数据仓库概述

2.实时数据仓库体系架构

3.实时数据仓库体系架构

什么是数据仓库(DataWarehouse)

数据仓库是一个面向主题的、集成的、相对稳定的、反映历史变化

的数据集合,用于支持管理决策。

主题数据相对历史

导向集成稳定变化

在较⾼层次上将企业在不同来源的不同数进入数据仓库后,数数据仓库分析着眼于

数据进行综合、归类据类型之间建立一致据将保持稳定,不会反映历史变化

和分析利用的一个抽性发生改变

象概念

数据仓库的发展

固定即席趋势实时主动

报表分析预测决策决策

通过预置的固定报表通过增加即席查询引入数据建模支持实时数据变化查询基于事件驱动,主动决策

感知分析预测分析明确

发生了什么?为什么会发生?将会发生什么?正在发生什么?希望发生什么?

实时数据仓库概述

什么是实时数仓?

n根据业务需求提供实时数据共享能力

共享

为满足业务对于数据时效性的需求,利用实

时计算技术,实现数据仓库建设的各个环节

n数据建设、数据治理、数据开发等

实时建设,包括数据的实时汇聚、实时处理、处理都采用实时的方式

实时分析、实时共享,传统数据仓库的方案

在时效性上和数据维护上变得越来越困难,管理n数据质量、数据标准、数据血缘、

元数据管理等都采用实时方式

实时数仓架构应运而生。

n数据采集、转换加载、数据

汇聚分发都采用实时方式

实时数仓建设背景

企业产品需求和内部决策对于数据实时性的

实时需求

要求越来越迫切,需要实时数仓赋能

随着实时计算框架的发展,实时计算涉及的

实时技术

相关技术越来越成熟

实时数仓是从数据采集、数据处理和数据共享等端到端全链路高时效性数据仓库建设方案,

从原本的小时/天级别做到秒/分钟级别。

实时数仓

文档评论(0)

152****8691 + 关注
实名认证
内容提供者

该用户很懒,什么也没介绍

1亿VIP精品文档

相关文档