面向商业银行数据仓库的数据质量管理关键技术研究-计算机技术专业毕业论文.docxVIP

湘潭大学 学位论文原创性声明 本人郑重声明：所呈交的论文是本人在导师的指导下独立进行研究 所取得的研究成果。除了文中特别加以标注引用的内容外，本论文不包 含任何其他个人或集体已经发表或撰写的成果作品。对本文的研究做出 重要贡献的个人和集体，均已在文中以明确方式标明。本人完全意识到 本声明的法律后果由本人承担。 作者签名： 日期： 年 月 日 学位论文版权使用授权书 本学位论文作者完全了解学校有关保留、使用学位论文的规定，同 意学校保留并向国家有关部门或机构送交论文的复印件和电子版，允许 论文被查阅和借阅。本人授权湘潭大学可以将本学位论文的全部或部分 内容编入有关数据库进行检索，可以采用影印、缩印或扫描等复制手段 保存和汇编本学位论文。 涉密论文按学校规定处理。 作者签名： 日期： 年 月 日 导师签名： 日期： 年 月 日 I I 摘 要 近年来随着国内金融体制改革的深入和互联网金融的兴起，国内以商业 银行为代表的银行业面临着前所未有的竞争压力。为了开拓更大的市场，深 度挖掘潜在用户，推广精细化运营，这就离不开数据仓库技术和数据挖掘应 用的支持。数据仓库为数据的集中管理和应用提供了基础平台，更是数据分 析、数据挖掘等决策支撑系统的数据基础。因此很多商业银行都部署了企业 级数据仓库系统。 而在企业级数据仓库的建设过程中，由于数据量巨大，涉及业务系统逻 辑复杂，在数据集成过程的数据处理环节或多或少会遇到各种数据质量问题， 而对于一个数据仓库而言，数据的质量显得尤为重要，这直接关系到决策支 撑系统的分析质量，对分析和挖掘结果有着关键性的影响。所以，如何保证 数据质量，是数据仓库项目一直所面临的重要问题。 本 文 主 要 工 作 着 重 从技 术 和 流 程 这 两 个 问 题 域 上 分 析 了 在 商业 银 行 数 据仓库项目建设过程中产生数据质量问题的原因，对数据质量评估模型进行 研究和探索，并设计一套改善数据质量的方法，包括数据质量评估模型以及 计算方法，设计和制定了数据处理环节的相关规范和标准，设计并实现了在 ETL 过程中数据处理流转环节的数据质量保证方法。这些分析结果和方法都 应用于数据仓库项目的实施中。 关键词：商业银行，数据仓库，数据质量，质量检查规则，Teradata II II Abstract In recent years, with the development of domestic financial system reforms and Internet finance, the bank industry, especially commercial bank, is facing unprecedented competitive pressure. In order to expand the market, commercial banks have to investigate potential users deeply and promote operation precisely, while both of them depend on a data warehouse and data mining applications. A data warehouse provides foundation not only for centralized data management and application, but also for data analysis, data mining and other decision-support systems. Therefore, many commercial banks have deployed enterprise data warehouse systems. Nevertheless during the process of building a enterprise data warehouse, the huge amount of data and complex business logic will leads to a variety of problems affecting data quality. As it is well konwn for a data warehouse, data quality is particularly important which influences the quality of decision-support system and the results of analysis and mining directly. Therefor