维度模型数据仓库搭建.pptVIP

数据的表现----Report 报表展示 开源的工具－BIRT Java Eclipse + Plugins BIRT Demo BIRT Demo /birt/phoenix/ All-in-One Eclipse + Plugins Demo 返回 ＣＳＲ：Customer Service Representative * 丰富的维度属性给出了丰富的分析切割能力， * 星型，雪花的比较 * 问题： １　ＥＪＢ直接生成的，因此没有数据库的设计文档，只有一堆数据库表，只能看Table , Attribute 解决：ＥＲＷｉｎ反向工程得到了模型 2 各表的用途，各字段含义不清楚，对业务不了解 解决：与业务系统开发人员沟通，不断完善Excel文档 * * 维度模型数据仓库的搭建 ----中创工作报告 dawei Outline 项目简介 数据仓库简介 中创DWH的组成部分及搭建 项目简介 Green Bank 甲方：瑞典 乙方：中创 银行贷款管理系统 贷款的申请，审批，还款业务 使用的技术 ＥＪＢ3.0 ＪＳＦ（JavaServer Faces) Web Service实现ＳＯＡ架构 11月5号业务系统已正式上线 整体架构图 ODS DW Service Bus Customer Web Intranet CRM CSR Account and customer mgmnt ETL, Report Runtime Service bus notifies BIRA at the same time as account and customer events occur 数据仓库简介 定义 数据仓库是一个面向主题、集成、时变、非易失的数据集合，是支持管理部门的决策过程 关键特征 面向主题 (Subject Oriented) 指信息是按主题进行组织的 集成 (Integrated) 数据来自多个异种数据源 时变 (Time Variant) 记录历史信息 非易失 (Nonvolatile) 与Database的区别 Database OLTP ：On Line Transaction Processing 面向业务 用户数量非常庞大,主要是操作人员 对响应时间要求非常高 Data Warehouse OLAP : On-Line Analytical Processing 面向决策和管理 用户数量相对较小 中创DWH的组成部分 数据的抽取 存储与管理 报表展示 DW 数据抽取 数据表现 数据的抽取----ETL ETL 数据抽取 Extract 转换 Transform 清洗 Cleaning 装载 Load 开源工具－ Kettle Java 图形化 拖拽式 Kettle Demo / Release Document Demo Flash Demo 返回 存储与管理----Model 存储建模 选用维度建模，星型模型 管理 建立索引 调优 维度模型简介 日期维度 日期关键字 (FK) 日期属性 。。。 产品维度 产品关键字 (PK) 产品属性 。。。 商场维度 商场关键字（PK） 商场属性 。。。 日销售情况事实表 日期关键字 (PK) 产品关键字 (FK) 商场关键字 (FK) 促销关键字 (FK) 事实 。。。 促销维度 促销关键字 (PK) 促销属性 。。。 事实表 维度表 维度模型----事实表 事实表 维度模型的基本表，存放大量的业务性能的度量值 事实表的一行对应一个度量值，一个度量值就是事实表的一行 事实表中最有用的事实是数字类型与可加型事实 日销售情况事实表 日期关键字（FK） 产品关键字 (FK) 商场关键字 (FK) 销售量 销售额 。。。 维度模型----维表 维表 维度表是进入事实表的入口 维度给出了使用数据仓库的接口 数据仓库的能力直接与维度属性的质量和深度成正比 产品维度 产品关键字 (PK) 产品描述 商标描述 分类描述 包装类型描述 包装尺寸 重量 储藏类型 。。。。 维度模型----星型模型 日期维度 日期关键字 (FK) 日期属性 。。。 产品维度 产品关键字 (PK) 产品属性 。。。 商场维度 商场关键字（PK） 商场属性 。。。 日销售情况事实表 日期关键字 (PK) 产品关键字 (FK) 商场关键字 (FK) 促销关键字 (FK) 事实 。。。 促销维度 促销关键字 (PK