面向校园网的高校数据集成方案的研究与应用-计算机应用技术专业论文.docxVIP

The The Research and Application of College Data Integration for Campus Networks By Li Jianhua Under the Supervision of Prof．Qu Shouning A Thesis Submitted to the University of Jinan In Partial Fulfillment of Requirement For the Degree of Master of Engineering University of Jinan Jinan，Shandong，E R．China May,2011 原创性声明本人郑重声明：所呈交的学位论文，是本人在导师的指导下， 原创性声明 本人郑重声明：所呈交的学位论文，是本人在导师的指导下， 独立进行研究所取得的成果。除文中已经注明引用的内容外，本 论文不包含任何其他个人或集体已经发表或撰写过的科研成果。 对本文的研究作出重要贡献的个人和集体，均已在文中以明确方 式标明。本人完全意识到本声明的法律责任由本人承担。 论文作者签名：奎建盏 日 期： 2旦!!：6：7 关于学位论文使用授权的声明 本人完全了解济南大学有关保留、使用学位论文的规定，同 意学校保留或向国家有关部门或机构送交论文的复印件和电子 版，允许论文被查阅和借鉴；本人授权济南大学町以将学位论文 的全部或部分内容编入有关数据库进行检索，可以采用影印、缩 印或其他复制手段保存论文和汇编本学位论文。 口公开 口保密( 年，解密后应遵守此规定) 论文作者签名：奎建也 导师签名： 日期： 济南大学硕卜学位论文目 济南大学硕卜学位论文 目 录 摘要 ．．V Abstract．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．VII 第一章绪论 1 1．1研究背景 ．1 1．2研究现状 ．2 1．3论文的主要工作、创新点及研究意义 ．4 1．3．1论文的主要工作 ．．4 1．3．2论文的研究点及创新点 ．．4 1．3．3论文的研究意义 ．．5 1．4论文组织结构 6 第二章数据集成相关技术介绍 ．9 2．1数据复制技术 9 2．2数据转换技术 9 2．3 ETL技术 ．．9 2．3．1数据抽取 ．10 2．3．2数据清洗转换 ll 2．3．3数据装载 ．1l 2．3．4 ETL工具 ．11 2．3．5 ODI ll 2．4数据存储技术 ．．15 2．4．1数据仓库技术 15 2．4．2 ODS技术 ．15 2．5本章小结 16 第三章 面向校园网的集成方案的整体设计 ．．19 3．1高校信息化现状概述 ．．19 3．1．1基础设施建设现状分析 ．19 3．1．2应用系统现状分析 ．．20 面向校园网的数据集成方案的研究0声用3．2数据集成总体方案的设计 面向校园网的数据集成方案的研究0声用 3．2数据集成总体方案的设计 ．22 3．2．1数据集成目标 22 3．2．2数据集成规则 23 3．2．3数据集成方案的架构设计 ．．24 3．2．4数据集成方案的总体框架设计 ．27 3．2．5数据集成方案的数据流程设计 ．29 3．3本章小结 29 第四章基于ODS的数据存储层设计 ．．3l 4．1元数据 ．．31 4．1．1数据标准的制定 ．32 4．1．2元数据标准的制定 ．．37 4．2集成中心数据库 43 4．2．1集成中心数据库存储的数据 43 4．2．2集成中心数据库建设规范 ．．44 4．2．3数据模型设计 45 4．2．4数据载入 ．45 4．3本章小结 46 第五章基于ODI的数据集成平台的设计 ．47 5．1数据集成平台的设计 ．．47 5．1．1数据抽取 ．49 5．1．2数据清洗 ．52 5．1．3映射转换和加载 ．53 5．2数据集成周期设置 ．54 5．3数据同步及共享 54 5．3．1全量同步 ．55 5．3．2增量同步 ．55 5．4本章小结 57 第六章 基于数据集成方案的实现 ．59 6．1集成开发 59 II 济南大学硕卜学位论文6．1．1总体设计阶段 济南大学硕卜学位论文 6．1．1总体设计阶段 60 6．1．2集成需求准备 60 6．1．3开发实施阶段 60 6．2性能测试 66 6．2．1测试范围 ．66 6．2．2测试用例 ．66 6．2．3测试结论 ．68 6．3性能优化 68 6．3．1数据集成接口开发阶段的优化 ．68 6．3．2数据集成运行期间的优化 ．．69 6．4本章小结 70 第七章总结与展望 ．71 7．1总结 ．．71 7．2展望 ．．71 参考文献 ．．73 致谢 ．77 附录 ．79 一、