数据仓库2-操作数据存储研究.ppt

第2讲 操作数据存储;数据仓库产生的原因;;数据仓库的四个基本特征： 数据仓库的数据是面向主题的（Subject Oriented）； 数据仓库的数据时集成的（Integrate）； 数据仓库的数据不可更新（Non-Volatile）； 数据仓库的数据时随时间不断变化（Time Variant）的。 ;数据仓库的体系结构;信息系统建设的阶段性和分布性的特点， 导致“信息孤岛”的存在。;7;只读;2 操作数据存储;数据库和数据仓库两层体系结构（DB-DW）并不能涵盖企业所有的数据处理要求。 某些应用既不是纯粹的联机事务处理，又不是高层决策分析。;导致一种新的数据环境-操作数据存储（Operational Data Store，ODS）的建立。 是两种处理类型之间存在的一个中间层次，从而形成了DB--ODS--DW的三层体系结构。 ;2.1.1 ODS的定义及特点;ODS是适应企业级的全局应用需求而产生的。全局应用可以大致地划分为两类： 企业级的（OLTP）联机事务处理 即时“OLAP”数据处理; 学校中有关教员的完整信息是被分散存放在学校的各部门DB中，现在若有教员因故调离，则要按规章办理手续。在DBS中，调离手续繁琐耗时。而在ODS系统中，可以开发教员调离全局应用，这就等于将学校的有关调离手续的规章反映在应用系统中，从而自动地保证了规定的制度得以不折不扣地执行。;2.1.2 ODS的功能和实现机制-OLTP;2.1.2 ODS的功能和实现机制-OLTP;实现企业级的OLTP思路：在ODS与DB之间提供双向映射关系，以保证双方的一致性。;定义在DB中的记录系统，说明ODS从DB的数据抽取关系，各DB系统上所做的修改操作都需要反映到ODS系统中。 ODS系统中还存放一些参考表，它反映的关系是ODS全局更新时所必须反映的所有DB中相关记录信息。;2.1.2 ODS的功能和实现机制-OLAP;企业级OLTP和即时OLAP两类数据处理有明显的差别，又可分别称之为“操作型”处理模式和“信息型”处理模式。 信息型处理模式就是只有查询操作的工作模式（非排他型） 操作型处理模式指含有更新操作的工作模式（排他性）。 如何协调两种处理模式？;动态切换 在系统中设置一个状态切换开关，使ODS系统在操作型环境和分析型环境间进行动态切换。以保证： 在进行即时OLAP时获得较快的响应速度 在进行操作型处理时，能保证联机事务处理时数据的完整性，事务的原子性、一致性、隔离性和持续性。;2.1.2 ODS的功能和实现机制;ODS的作用和地位与企业性质、经营业务范围、规模大小等实际情况紧密相连。有的主要是进行全局事务处理，有的则主要是即时OLAP。 如果是在地理上分布的集团公司的ODS系统，则可能是分层的。 ;;2.1.2 ODS的功能和实现机制-分层ODS体系;2 操作数据存储;2.2 DB-ODB-DW体系结构;ODS与DW的差别 面向主题和集成性使得ODS的数据在静态特征上很接近DW中的数据，但是在ODS与DW之间仍然有许多基本的、重要的差别。 1.存放的数据内容不同（最大差别） ODS：当前或接近当前的数据、细节数据、可联机更新 DW：历史数据、细节数据和综合数据、不可变快照 ;2.数据量是不同等级的 DW：保存大量历史数据 ODS：只存放当前和接近当前的数据 ;4.面向的需求不同 ODS：一是为了满足企业进行全局应用的需要，二是向数据仓库提供一致的数据环境以供抽取。 DW：主要用于高层战略决策。 ;DW与ODS面向不同的用户、不同的需求，都有其不可替代的作用，彼此间不是相互包含的，同时两者又可以相互结合、相互补充。;ODS充当“承上启下”的角色 在原来独立的各个DB基???上建立一致的、面向主题的数据环境，使原有的DBS得到改造。 将DW和DB隔离开，使DW卸去数据集成、结构转换等负担，DW的数据追加通过ODS进行而变得异常简单，简化DW的数据传输接口及DW管理数据的复杂度。;ODS满足了企业级全局应用的需求 不仅要获得长期决策信息，也要进行日常决策，ODS系统的建设，弥补了DB-DW两层体系结构的不足。 ODS作出的即时决策是集成性、企业级的。这对企业进行中层管理，制订短期决策极有帮助。但ODS不是必须的，要视分析处理的需求而定。