第10章数据仓库.pptxVIP

第10章数据仓库会计学第1页/共62页数据库处理的两大应用联机事务处理（OLTP）操作型处理，为企业的特定应用服务是对数据库的联机的日常操作，通常是对一个或一组记录的查询和修改人们关心的是响应时间、数据的安全性和完整性决策支持系统（DSS）第2页/共62页数据库处理的两大应用联机事务处理（OLTP）决策支持系统（DSS）分析型处理，用于管理人员的决策分析经常需要访问大量的历史数据数据仓库 + 联机分析处理 + 数据挖掘（ DW + OLAP + DM ）→ DSS第3页/共62页数据仓库是一个面向主题的、集成的、非易失的（不可修改）且随时间变化的数据集合，用来支持管理人员的决策第4页/共62页数据仓库的特点面向主题主题是在较高层次上对数据抽象面向主题的数据组织分为两步骤抽取主题确定每个主题所包含的数据内容每个主题在数据仓库中都是由一组关系表实现的集成的数据不可更改随时间变化的第5页/共62页数据仓库的特点 —— 面向主题第6页/共62页数据仓库的特点面向主题集成的数据仓库的数据是从原有的分散数据库数据中抽取来的消除数据表述的不一致性（数据的清洗）数据的综合数据不可更改随时间变化的第7页/共62页数据仓库的特点 —— 集成第8页/共62页数据仓库的特点面向主题集成的数据不可更改数据仓库的主要数据操作是查询、分析不进行一般意义上的数据更新（过期数据可能被删除）数据仓库强化查询、淡化并发控制和完整性保护等技术随时间变化的第9页/共62页数据仓库的特点——数据不可更改第10页/共62页数据仓库的特点面向主题集成的数据不可更改随时间变化的不断增加新的数据内容不断删除旧的数据内容定时综合数据仓库中数据表的键码都包含时间项，以标明数据的历史时期第11页/共62页数据仓库的特点 ——随时间变化第12页/共62页数据仓库的结构OLTP系统数据仓库/决策分析系统高度汇总数据RDBMSSybaseSAP/ERP分析型CRM业务指标分析轻度汇总数据VSAM数据集市当前详细数据数据仓库5-10 年EXCEL过去详细数据第13页/共62页数据仓库的结构数据由操作型环境（综合）导入数据仓库数据具有不同的细节级早期细节级（过期数据）当前细节级轻度综合数据级（数据集市）高度综合数据级第14页/共62页数据仓库建立的过程第15页/共62页粒度是指数据仓库的数据单位中保存数据的细化或综合程度的级别粒度级越小，细节程度越高，综合程度越低，回答查询的种类越多粒度影响数据仓库中数据量的大小粒度问题是设计数据仓库的一个重要方面双重粒度在数据仓库的细节级上创建两种粒度短期储存的低粒度（真实档案），满足细节查询具有综合的高粒度（轻度综合），做分析第16页/共62页第17页/共62页第18页/共62页分割是指把数据分散到各自的物理单元中去，以便能分别独立处理，提高数据处理效率是粒度之后的第二个主要设计问题两个层次的分割系统层：DBMS，一种定义应用层：开发者，多种定义多种分割的标准日期：最常用的地理位置组织单位…...第19页/共62页第20页/共62页数据仓库中的数据组织形式简单堆积轮转综合数据按一定的格式进行轮转的累加简化直接按一定的时间间隔，对数据进行提取，是操作型数据的一个快照连续把新的快照追加到以前的连续数据上去第21页/共62页数据仓库中的数据组织形式简单堆积每日由数据库中提取并加工的数据逐天积累堆积第22页/共62页数据仓库中的数据组织形式轮转综合数据按一定的格式进行轮转的累加第23页/共62页数据仓库中的数据组织形式简单堆积与轮转综合的比较第24页/共62页数据仓库中的数据组织形式简化直接按一定的时间间隔，对数据进行提取，是操作型数据的一个快照第25页/共62页数据仓库中的数据组织形式连续把新的快照追加到以前的连续数据上去第26页/共62页数据仓库的数据追加数据追加数据仓库的数据初装完成以后，再向数据仓库输入数据的过程称为数据追加变化数据的捕获时标法：加标识DELTA法：对更新作记录前后映象法：两次快照的对比日志法：利用DBMS的日志，需改进第27页/共62页数据库的体系化环境是在一个企业或组织内部，由各面向应用的OLTP数据库及各级面向主题的数据仓库所组成的完整的数据环境操作型环境、分析型环境四层体系化环境操作型环境——OLTP全局级——数据仓库部门级——局部仓库个人级——个人仓库，用于启发式的分析数据集市（Data Mart）特定的、面向部门的小型数据仓库是为满足用户特定需求而创建的数据仓库是数据仓库的子集第28页/共62页数据库的体系化环境第29页/共62页数据库的体系化环境第30页/共62页数据仓库的开发生命周期第31页/共62页数据仓库的基本数据模式星型模式(Star Schema)事实表(fact table)，存放基本数据，相关主题的数据主体（BC