数据仓库2-操作数据存储试卷.ppt

* ODS与DW的差别 面向主题和集成性使得ODS的数据在静态特征上很接近DW中的数据，但是在ODS与DW之间仍然有许多基本的、重要的差别。 1.存放的数据内容不同（最大差别） ODS：当前或接近当前的数据、细节数据、可联机更新 DW：历史数据、细节数据和综合数据、不可变快照 2.2.1 ODS与DW的区别 * 2.数据量是不同等级的 DW：保存大量历史数据 ODS：只存放当前和接近当前的数据 3.技术支持不尽相同 ODS：要支持面向记录的联机更新，又要随时保证数据与源数据系统中数据的一致性。 DW：需要支持ETL技术和数据快速存取技术。 2.2.1 ODS与DW的区别 * 4.面向的需求不同 ODS：一是为了满足企业进行全局应用的需要，二是向数据仓库提供一致的数据环境以供抽取。 DW：主要用于高层战略决策。 5.使用者不同 ODS：企业的中层管理人员。 DW：DSS分析员或企业高级决策者。 2.2.1 ODS与DW的区别 * DW与ODS面向不同的用户、不同的需求，都有其不可替代的作用，彼此间不是相互包含的，同时两者又可以相互结合、相互补充。 DB DB DB ODS DW 应用 操作型环境 分析型环境 2.2.2 三层体系结构 * ODS充当“承上启下”的角色 在原来独立的各个DB基础上建立一致的、面向主题的数据环境，使原有的DBS得到改造。 将DW和DB隔离开，使DW卸去数据集成、结构转换等负担，DW的数据追加通过ODS进行而变得异常简单，简化DW的数据传输接口及DW管理数据的复杂度。 2.2.2 三层体系结构 * ODS满足了企业级全局应用的需求 不仅要获得长期决策信息，也要进行日常决策，ODS系统的建设，弥补了DB-DW两层体系结构的不足。 ODS作出的即时决策是集成性、企业级的。这对企业进行中层管理，制订短期决策极有帮助。但ODS不是必须的，要视分析处理的需求而定。 2.2.2 三层体系结构 人有了知识，就会具备各种分析能力， 明辨是非的能力。 所以我们要勤恳读书，广泛阅读， 古人说“书中自有黄金屋。 ”通过阅读科技书籍，我们能丰富知识， 培养逻辑思维能力； 通过阅读文学作品，我们能提高文学鉴赏水平， 培养文学情趣； 通过阅读报刊，我们能增长见识，扩大自己的知识面。 有许多书籍还能培养我们的道德情操， 给我们巨大的精神力量， 鼓舞我们前进。 淘宝的数据分析产品两者的区别 * * 第2讲 操作数据存储 * 数据仓库产生的原因 数据处理的类型 操作型处理（OLTP)：数据的收集、整理、存储、查询和增、删、改操作。 分析型处理(OLAP)：数据的再加工，往往要访问大量的历史数据，进行复杂的统计分析。 * 1.1.3两者数据处理模式的差别 操作型数据 分析型数据 细节的 综合的，或提炼的 当前数据 历史数据 更新的 不可更新，只读的 生命周期符合SDLC （软件开发生命周期） 完全不同的生命周期 对性能要求高 对性能要求宽松 一个时刻操作一个单元 一个时刻操作一个集合 事务驱动 分析驱动 面向应用 面向分析 一次操作数据量小，计算简单 一次操作数据量大，计算复杂 支持日常操作 支持管理需求 * 数据仓库的四个基本特征： 数据仓库的数据是面向主题的（Subject Oriented）； 数据仓库的数据时集成的（Integrate）； 数据仓库的数据不可更新（Non-Volatile）； 数据仓库的数据时随时间不断变化（Time Variant）的。 数据仓库的基本概念 * 数据仓库的体系结构 * 信息系统建设的阶段性和分布性的特点， 导致“信息孤岛”的存在。 * * 只读 干部 后勤 财务 * 2 操作数据存储 2.1 什么是ODS 2.2 DB-ODS-DW体系结构 * 数据库和数据仓库两层体系结构（DB-DW）并不能涵盖企业所有的数据处理要求。 某些应用既不是纯粹的联机事务处理，又不是高层决策分析。 2.1什么是ODS * 导致一种新的数据环境-操作数据存储（Operational Data Store，ODS）的建立。 是两种处理类型之间存在的一个中间层次，从而形成了DB--ODS--DW的三层体系结构。 2.1什么是ODS * 2.1.1 ODS的定义及特点 定义：是用于支持企业日常的全局应用的数据集合。 ODS中的数据具有4各基本特征：面向主题的、集成的、可更新的、数据是当前或接近当前的。 ODS中只存放当前或接近当前的数据，并且可以进行联机修改，包括增、删、改等操作。 * ODS是适应企业级的全局应用需求而产生的。全局应用可以大致地划分为两类： 企业级的（OLTP）联机事务处理 即时“OLAP”数据处理 2.1.2 ODS的功能和实现机制 * 学校中有关教员