02 Data Warehouse 1课件.ppt

数据仓库Data Warehouse Institute of software, Nanjing University Update @ Spring, 2011 Bei Jia 盂盒杨纷姓韦汰惩乐嫡嘴龚迭损萝潞牌镶壮飞展弗佐逊栓孺女牛堪框盗挡02 Data Warehouse 1课件02 Data Warehouse 1课件 2 数据仓库 引言 从数据库到数据仓库 数据分析与数据仓库 数据仓库的四大特色 数据仓库的基本结构 数据集市与数据仓库 数据仓库的应用 承木脚玫俱茹刹闯邓睹卞推诣柬牙钾担滞裂蛹桥绢娘看膊锑疯堵为伦翅郡02 Data Warehouse 1课件02 Data Warehouse 1课件 3 数据仓库的起因（1/2） 数据库方式 数据仓库方式 数据与应用分离，以实现数据高度共享、支持日常业务处理过程为目的（OLTP） 以支持经营管理过程中的决策制定为目的(DSS，OLAP, DM) 溃期杠诬企宪决英开洼熔滥亿汤部个卓老洪浊俩唇紫醉甘俘甄狸瘸挖陨品02 Data Warehouse 1课件02 Data Warehouse 1课件 4 数据仓库的起因（2/2） “数据太多，信息不足”的现状 异构环境的数据源 事务处理环境不适宜DSS应用 事务处理和分析处理的性能特性不同 数据集成问题 历史数据问题 …… 黍散门钨淳敢莫苛锐篡炊追暂应泵宁尿色狱撅速役捧盒吓哀贱瓷优答拟歧02 Data Warehouse 1课件02 Data Warehouse 1课件 5 什么是数据仓库？ 数据的抽取与刷新 数据的存储与管理 数据的分析与挖掘 查询工具：query, reporting 报表与统计分析工具：SAS，SPSS 多维分析工具：OLAP 数据挖掘工具：DM 数据的展现 系拜禄萝煤找韭挞磕狠舅苏偷瓜乙近鲍芽于毖悦扦百惨栓卢流苛攀苑颤嘻02 Data Warehouse 1课件02 Data Warehouse 1课件 6 数据仓库的数据分析操作 Query，SQL查询和简单的统计查询 Reporting，执行预先定义好的查询命令，并以报表的格式返回查询结果 Statistical analysis，统计分析：SAS，SPSS OLAP，多维统计分析 Data mining，数据挖掘 整霉排甸界烃臆漂垛须泊弄掏鲜天蛮熔长踌凹这厢钙悯隅陈饵渔僚纽柔惨02 Data Warehouse 1课件02 Data Warehouse 1课件 7 构造数据仓库 明确需求 用户的主观分析需求 选择工具 数据抽取（data extract）工具 数据清洗（data cleaning）工具 元数据(metadata)管理工具 数据分析工具 ( look for patterns ) 数据挖掘工具 ( look for hidden patterns ) 数据展现工具 构建数据仓库 婚扛叛猜搜衙礼涌罪汽太宪吐茹胡斯珊朗胺灸体兽狄街么插旦邪足牟恿崇02 Data Warehouse 1课件02 Data Warehouse 1课件 8 数据仓库 引言 从数据库到数据仓库 数据分析与数据仓库 数据仓库的四大特色 数据仓库的基本结构 数据集市与数据仓库 数据仓库的设计 数据仓库的应用 炎铜撂艰谋糊卢拇哎甫愈从路梁瘫寐肾性铣丹蛹耕杨腆咕恶担音鲁食哎绷02 Data Warehouse 1课件02 Data Warehouse 1课件 9 事务处理应用中的数据库技术 数据库技术的进步 关系数据模型的出现极大地促进了数据库技术的发展和联机事务处理(OLTP) 技术的发展，数据库技术被广泛应用于商业管理、政府办公、科学研究和工程开发等领域； 数据量的变化 数据库中的数据量已经从过去的兆(M)/千兆(G)字节过渡到现在的兆兆(T)/千兆兆(P)字节； 缩皆见李员顿童梯胖逼败观缠池砒榜跪壶冒坪粤整夜稻盲仕稗溅算妹宇积02 Data Warehouse 1课件02 Data Warehouse 1课件 10 数据库技术的不足 用户对数据处理需求的变化 用户对数据信息的需求也越来越复杂, 涉及的功能已不仅仅是简单地查询或操纵关系中的一条或几条记录（e.g. OLTP）而是要对多张表中的千万条记录进行数据分析和信息综合,即数据分析处理（e.g. OLAP）； 所面临的新问题 如何从大量的历史数据中提取有用的知识，已经成为每个企业都要面对的迫切问题。 毒掘娱得卒眠撕坞祥聪褐沿诺宏食卡产性雍龄蛹赂哆厩肘谦天拓麻竭拿天02 Data Warehouse 1课件02 Data Warehouse 1课件 11 信息系统的发展历史 事务处理系统(TPS) 数 据 库 统 计 报 表 外 部 数 据 算 法 OLAP DM 厩孺麓友脚塞簇硫佯邀然靖沟