数据仓库概述.pptVIP

DWDM 2001/1月采购表 2001/2月采购表 1 商品编号 商品名 购买地点 1 2 1 商品编号 商品名 购买地点 1 2 4 牙膏 毛巾 水杯 上海 广州 深圳 3 毛巾 牙膏 笔 北京 广州 杭州 6 裤子 宁波 2001/1—2001/2月采购表 商品编号 1 1 2 3 4 6 商品名 牙膏 牙膏 毛巾 笔 水杯 裤子 购买地点 上海 北京 广州 杭州 深圳 宁波 时间 2001/1 2001/2 2002/1-2001/2 2001/2 2001/1 2001/2 图1-35 连续文件示例 2.1 数据仓库的体系结构 2.2 数据仓库的特点 2.3 数据仓库的数据组织 2.4 数据仓库建设的两条技术路线 2.5 操作数据存储ODS 2.6 外部数据和非结构数据 第六十三页，共九十页。 DWDM 客户基本信息表 客户标识号 客户姓名 客户年龄 客户地址 . . . 客户呼叫记录表 客户标识号 客户呼叫时间 客户呼叫地点 客户呼叫号码 呼叫时长 呼叫费率 . . . 客户话费表 客户标识号 客户本月总话费 本月月租费 本月通话费 本月短信费 . . . 客户咨询表 客户标识号 客户咨询内容 咨询答案 . . . 客户标识号 客户姓名 客户年龄 客户地址 . . . 客户标识号 客户呼叫时间 客户呼叫地点 客户呼叫号码 呼叫时长 呼叫费率 . . . 客户标识号 客户本月总话费 本月月租费 本月通话费 本月短信费 . . . 客户标识号 客户咨询内容 咨询答案 . . . 图1-13 数据从操作型环境提取到分析型环境的同时进行数据集成 2.1 数据仓库的体系结构 2.2 数据仓库的特点 2.3 数据仓库的数据组织 2.4 数据仓库建设的两条技术路线 2.5 操作数据存储ODS 2.6 外部数据和非结构数据 第三十一页，共九十页。 DWDM 客户信息表 客户呼叫记录表 客户话费表 客户咨询表 1 0 F M 女 男 f m A表通话时长 B表通话时长 C表通话时长 2小时 120分钟 7200秒 客户信息表 客户呼叫记录表 客户话费表 客户咨询表 name user_name USERNAME NAME 客户信息表 客户呼叫记录表 客户话费表 客户咨询表 姓 名 姓 名 姓 名 姓 名 char(10) varchar(10) char(12) varchar(20) 统一编码/编码间 转化 统一度量单位 统一变量命名 统一字段格式 集成后数据 图1-14 数据集成中数据转化的工作 2.1 数据仓库的体系结构 2.2 数据仓库的特点 2.3 数据仓库的数据组织 2.4 数据仓库建设的两条技术路线 2.5 操作数据存储ODS 2.6 外部数据和非结构数据 第三十二页，共九十页。 DWDM 任务调度：定期进行数据 刷新 业务系统 数据清洗,转换整理 数据仓库 图1-15 数据刷新示意 进一步考虑，决策支持系统需要的不是静态的集成，而是动态的集成。静态集成的最大缺点在于数据集成后数据源中的数据发生了变化，这些变化将不能反映给决策者，导致决策者使用的是过时的数据。因此数据仓库必须能够使集成数据以一定的周期（例如24小时）进行刷新，使决策者能够使用新增的数据，其过程如图1-15所示。 2.1 数据仓库的体系结构 2.2 数据仓库的特点 2.3 数据仓库的数据组织 2.4 数据仓库建设的两条技术路线 2.5 操作数据存储ODS 2.6 外部数据和非结构数据 第三十三页，共九十页。 DWDM 3 数据的稳定性 OLTP 中的操作 —— 存入、查询、修改、删除 OLAP 中的操作 —— 存入、查询 （注意：两个 存入 的不同） 数据仓库中，数据一旦写入，就不再变化了。所以，也可以把数据仓库 看作是一个虚拟的只读存储器。 我们在图中演示了一个简单的例子。例如在3月23日，100号顾客的消费金额变成250元，这一信息在业务系统中被更新了。但是在数据仓库中（假定数据仓库每天进行一次数据提取），3月23日的数据提取结果是在数据仓库中增加了记录XXX，说明100号顾客在3月23日的消费金额为200元，在执行3月24日的数据提取工作后，原先记录的XXX并没有发生任何的改变，而是在数据仓库中增加了一条新的纪录YYY，说明100号顾客在3月24日的消费金额为2