第三章数据仓库的开发应用过程1.3.pptVIP

2. 系统集成测试 在完成数据仓库单元测试以后，还需要进行数据仓库的集成测试，测试是验证每个单元与数据仓库系统和子系统之间的接口完好，能够正常传递数据，执行系统的整体功能。 在测试之前必须依据数据仓库的所有组件功能、数据仓库应用方法和数据仓库开发计划，制定详细的测试计划。 在完成数据仓库的系统集成测试以后，就可以进行数据仓库数据的首次加载。 在数据仓库交付用户使用之前，需要对数据仓库进行交付测试。 3.7 数据仓库的应用、支持和增强 3.7.1 数据仓库的用户培训及支持 3.7.2 数据仓库的使用方式 3.7.3 数据仓库使用中的数据刷新 3.7.4 数据仓库的增强 数据仓库设计与分析： 分组：每组3人，自由组合，每组选出一个做答辩，答辩PPT要求10页以上，分组答辩前学委交分组名单。 讨论内容与题目： 组1：教务选课系统数据仓库的建模与应用 组2：图书馆借书系统数据仓库的建模与应用 组3：学生成绩管理系统数据仓库的建模与应用 组4：学生学籍管理系统数据仓库的建模与应用 组5：超市CRM系统数据仓库的建模与应用 组6：股票分析管理数据仓库系统的建模与应用 答辩PPT包含以下几个部分： 1、系统总体架构（3分） 2、数据仓库建模（4分） 3、数据仓库的应用（2分） 4、结论（1分） 3.4.4 关系模型的定义 1.不管是数据仓库的概念模型还是E-R模型、星型模型还是雪花模型，其最后的物理实现必然是以各种数据表来完成的 ； 2.不同的表或由指标实体、维实体、详细类别实体转换而成，但是在具体实现时一般采用关系数据库实现，因此要为各种实体定义相应的关系模型 。 3.4.5 数据仓库的实体定义 表3-5 销售单细节（Order_Detail）实体特征表 列名 列的属性值 值来源/值域 完整性约束 类型与大小 Customer_Number 主键列、外部键列 来自客户实体的合法客户键列 没有客户键列，数据就不存在 Char(10) Order_Number 主键列、外部键列 来自销售单实体的合法键列 没有销售单键列，数据就不存在 Char(10) Product_Number 主键列、外部键列 来自商品实体的合法键列 没有商品键列，数据就不存在 Char(10) Product_Price 正的金额数 Money(float) …… …… …… …… …… 表3-6 实体容量与更新频率表 实体 容量 更新频率 Customer 中等容量，有100个重点客户，2000个跟踪目标 每月对客户情况进行一次分析，更新频率也为每月一次 Product 小容量，500种商品 大约有500种商品，商品的更新是每月一次，数据更新也照此 Order_Detail 大容量，其上限是354 000 000 000,考虑到各种客户类型与各种商品的组合情况，一般很少达到 数据每月汇总一次，但是业务处理系统的数据每日需要更新一次，因此更新频率为每日一次 …… …… …… 表3-6 数据抽取流程图 3.4.6 数据仓库的数据抽取模型 2.数据仓库的数据抽取、转换与加载计划 1）影响数据抽取、转换与加载的因素 （1）数据格式 （2）坏数据 （3）系统的兼容性 （4）数据源的变化 （5）数据收取的时间 2）确定数据抽取、转换与加载的策略 （1）全库比较 （2）利用程序日志 （3）利用数据库日志 （4）利用时间戳 （5）利用位图索引 3.数据仓库的数据清洗转换方法 1）类型转换 2）串操作 3）数学函数 4）参照完整性 5）关键字翻译 6）聚集运算 4.数据仓库的数据抽取、清洗与转换模型 表3-7 数据源抽取对象表 数据平台 数据库 表名 备注 Windows/SQL Server XSSJ KHCG 客户采购商品表 Windows/SQL Server XSSJ SPQK 商品情况表 Windows/Access RSGL ZGYJ 职工业绩表 …… …… …… …… 表3-8 数据源抽取规则表 表.列名 过滤与连接条件 比较值 复合条件 备注 KHCG.CGSL 50 000 AND 采购商品数量小于50 000 KHCG.CGSL 500 AND 采购商品数量大于500 SPQK.SPID ≠ ‘AB’ OR 商品前两位非‘AB’ …… …… …… …… ….. 表3-9 数据抽取的目标表、列与源表、列的对应关系表 目标表.列 源表.列 转换公式 备注 SJCK_KHCG.KHZY KHCG.KHZY 直接转换 客户职业 SJCK_KHCG.CGRQ KHCG.CGRQ 将月/年/日 的日期格式转换成