149数据治理能力提升专项培训-企业数仓建设体系.pdf

数据治理能力提升专项培训

企业数据仓库体系建设

目标

l通过学习本课程，您将能够：

了解数据仓库发展历程

掌握数据仓库特点

掌握数据仓库分层架构设计

认识数据仓库产品解决方案

Copyright©HangzhouDtDreamTechnologiesCo.,Ltd.Allrightsreserved.

目录

1.数据仓库概述

2.数据仓库体系架构

3.数据仓库建设实现

数据仓库的发展

l数据仓库：由数据仓库之父比尔·恩门（BillInmon）于1990年提出，主要功能是将系统联机事务处理

(OLTP)所累积的大量资料，透过数据仓库理论所特有的储存架构，做有系统的分析整理，以利用各种联

机分析处理(OLAP)、数据挖掘(DataMining)，支持如决策支持系统(DSS)、商业智能(BI)的建设等。

深大数据仓库

度Ø数据量：PB/ZB级...

传统数据Ø计算能力：分布式弹性计算

仓库Ø驱动方式：支撑在线应用

Ø数据维度：全域维度

Ø数据量：TB级

Ø计算能力：主机/MPP

Ø驱动方式：以BI、单应用

Ø数据维度：内部数据

广度

传统操作型数据库架构

v是数据库系统的主要应用

v系统基本架构：数据读写频率高

用户用户用户

响应时间快

特点

应用系统

存储的数据量小

数据库管理系统

数据安全可靠

数据库

统计分析成为常态

OLAP和OLTP相结合

1存储的数据量小

2只能针对某一个应用数据进行分析

缺点

分析

3影响正常业务使用效率

生产应用系统

4无历史数据

数据库

OLAP剥离成为当时主流趋势

OLAP和OLTP剥离

1提高了业务系统性能

优点2“拥有”了抽取出来的数据

生产应用系统