基于约束的数据质量评估算法研究_梁吉胜.pdfVIP

12 3 2012 1 科 学 技 术 与 工 程 Vol. 12 No. 3 Jan. 2012 第 卷 第 期 年 月 167 1— 1815 (2011)3-0551-04 Science Technology and Engineering  2012 Sci. Tech. Engrg. 基于约束的数据质量评估算法研究 1 2 2 2 2 梁吉胜 李天阳 王惠霞 杨 锐 张旭东 ( ， 163318 ; 2 ， 056028) 东北石油大学计算机与信息技术学院 大庆 河北汉光重工有限责任公司 邯郸 ， ， 。 摘 要 随着信息技术快速的发展与信息系统应用的加深 企业积累了大量的历史数据 支撑企业正常运营与决策 为了使 、 ， ， 。 决策更加正确 有效 需要对历史数据进行有效的数据质量评估 并基于评估结果进行数据清洗 重点研究了基于数据维度 ， ， ， 下数据质量约束的数据质量评估方法 确定数据质量评估维度 并定义了各维度下的数据质量约束 并基于约束给出数据质 。 量评估算法 方法在大庆油田生产数据库数据质量评估项目与河北汉光重工有限责任公司财务系统数据库数据质量评估项 目中得到了应用。 关键词 数据质量 约束 评估算法 数据维度 中图法分类号 TP311. 12 ; 文献标志码 A ， 随着信息技术的高速发展 企业构建了大量的 1 数据质量评估过程 ， ， 计算机信息系统 拥有一定数量的数据库 积累了 ， 。 庞大的历史数据 支撑企业日常运营与决策 数据 数据质量评估一般是根据现有的历史数据质 ， 、 的质量越高 决策分析所得的结果越正确 越有意 量问题初步确定数据质量的评估维度和维度下约 。 ， 义 为了满足支持决策分析需要 需对数据的数据 ， ， 束 然后根据约束确定评估算法 基于算法对数据 ， ， 质量的进行有效的评估 并加以清洗 得到数据质 。 ， 质量进行检测评估 基于评估结果 对出现问题的 。 ， 量较高的数据 数据质量研究涉及到统计学 人工 ， 数据进行深层次的挖掘和研究 针对具体的质量问 、 ; 智能 数据库等领域 主要指数据库模式与实例数 。 题制定更为详细的控制处理规则 随着质量问题