技术篇数据资源管理技术.pptxVIP

技术篇数据资源管理技术第1页/共62页 引言现在企业的问题不是数据太少，而是数据太多！第2页/共62页 “信息爆炸”面临的问题存储信息爆炸访问共享安全引言第3页/共62页 引言第4页/共62页 引言数据是重要的组织资源，它同企业其他资源：劳动力、原材料、资金和设备一样，应该放在同等重要的位置上进行管理。许多组织由于缺乏关于企业内部运作和外部环境的高质量的信息，因而在竞争中失败。第5页/共62页 引言广义的数据资源管理包括：文件组织数据库和数据仓库数据规划和数据管理企业数据处理方式文件组织数据库系统第6页/共62页 主要内容：企业数据处理方式文件组织数据库系统第7页/共62页 一、企业数据处理方式现代企业处理信息的方式主要有以下两种：以联机事务处理形式处理信息（OLTP）以联机分析处理（OLAP）形式处理信息，并利用信息进行决策第8页/共62页 OLTP 联机事务处理 (OLTP：OnLine Transaction Processing)基本特征： 顾客的原始数据可以立即传送到计算中心进行处理，并在很短的时间内给出处理结果。一个重要性能指标是实时响应时间(Response Time) 即用户在终端上送入数据之后，到计算机对这个请求给出答复所需要的时间。 目前大多数企业运用业务数据库（Operational database）和数据库管理系统（DBMS）对OLTP提供支持。第9页/共62页 OLAP-OnLine Analytical Processing联机分析处理企业从事务中获取信息后，需要对信息进行分析，以便从事各项决策任务。OLAP是一种为支持决策而进行的信息处理方式。数据仓库能支持联机分析处理信息的功能第10页/共62页 OLTP vs OLAPOLTPOLAP数据特性原始、细节性数据汇总、提炼性资料数据时间性当时的运算资料包含历史数据变化频率经常少有变化，大多为查询主题性功能导向、交易驱动分析导向、分析驱动数据处理量一次处理的数据量小一次处理的资料量大使用者针对操作人员、日常操作针对决策人员、支持管理需要性能要求可快速更新资料可快速得到查询结果第11页/共62页 OLTP vs OLAP第12页/共62页 二、文件组织文件——数据库的基础数据的物理组织和逻辑组织几种文件组织方式第13页/共62页 文件——数据库的基础1 企业中的数据一般是以文件的形式组织起来的，并按 档案的方式存放在光盘、磁盘等存储介质上，应用时根据用户的指令，用特定的程序对文件的内容进行操纵。2 人们总是以文件为单位，操纵数据库中的数据。第14页/共62页 数据的物理组织和逻辑组织信息的物理组织是面向机器、面向存储设备信息的逻辑组织是面向用户的应用需求第15页/共62页 几种文件组织方式文件是数据库组织的基础。文件的逻辑组织形式将直接影响整个信息系统的效率。几种文件组织方式顺序文件索引文件链表文件倒排文件第16页/共62页 顺序文件顺序文件是最简单的文件，文件的各个记录按逻辑顺序存放在外存的连续区中，即顺序文件中物理记录的顺序和逻辑记录的顺序一致。如果文件按关键字有序输入，则形成的顺序文件称为顺序有序文件；否则称为顺序无序文件。顺序文件根据记录的序号或记录的相对位置来进行存取，其特点是当存取第i个记录时，必须先搜索在它之前的i-1个记录；插入新的记录时，只能加在文件的末尾；若要更新文件中的某个记录，则必须将整个文件进行复制。第17页/共62页 顺序文件：应用场合最佳应用场合，是在对诸记录进行批量存取时，即每次要读或写一大批记录。此时，对顺序文件的存取效率是所有逻辑文件中最高的。在交互应用的场合，如果用户(程序)要求查找或修改单个记录，为此系统便要去逐个地查找存诸记录。这时，顺序文件所表现出来的性能就可能很差，尤其是当文件较大时，情况更为严重。增加或删除一个记录，比较困难。第18页/共62页 索引文件具有索引表的文件成为索引文件。索引表中的每一项称作索引项。不论主文件是否按关键字有序，索引表中的索引项总是按关键字（或逻辑记录号）顺序排列。若数据区中的记录也按关键字顺序排列，则称索引顺序文件。反之，若数据区中记录不按关键字顺序排列，则称非顺序文件。索引文件可以大大提高表查找的速度。因为索引表容量小，且索引表按关键字有序。 第19页/共62页 三大索引介绍科学引文索引（SCI) 《科学引文索引》（Science Citation Index,简称SCI）是美国科学情报研究所（Institute Scientific Information，简称ISI，）出版的一种世界著名的综合性科技引文检索刊物。第20页/共62页 工程索引（EI）《工程索引》（The Engineering Index，简称EI）创刊于1884年，是美