工业数据流通数据质量管理规范.docxVIP

1

工业数据流通数据质量管理规范

1范围

本文件给出了工业数据流通中数据质量的总体要求和职责要求，规定了数据质量管理指标、质量管理流程、质量管理工具等方面的要求。

本文件适用于工业数据流通过程中对工业数据进行质量管理的工作。

2规范性引用文件

下列文件中的内容通过文中的规范性引用而构成本文件必不可少的条款。其中，注日期的引用文件，仅该日期对应的版本适用于本文件；不注日期的引用文件，其最新版本（包括所有的修改单）适用于本文件。

GB/T36344-2018信息技术数据质量评价指标

3术语和定义

下列术语和定义适用于本文件。3.1

工业数据industrialdata

在工业领域中，涉及企业的所有生产活动和服务所产生的数据。[来源：GB/T42128-2022，3.1.1]

3.2

数据质量dataquality

数据的一组固有特性满足要求的程度。注:固有特性一般指永久性的特性。

[来源：GB/T39400-2020,3.1]3.3

数据质量管理dataqualitymanagement指导和控制某机构数据质量的协调活动。

[来源：GB/T39400-2020,3.2]3.4

数据质量管理工具dataqualitymanagementtool

运用信息化技术和管理方法来规划、实施与控制数据质量的识别、评估、提升等一系列活动。

4总体要求

工业数据流通过程中，相关单位应按本文件的要求建立数据质量管理体系，编写出台相应的文件，在执行过程中应对其有效性进行持续改进，实现数据质量的持续提高。具体包括：

2

DB21/TXXXXX—XXXX

a）识别数据质量管理工作覆盖的范围，确定数据质量管理涉及的环节和流程；

b）确定这些环节和流程的顺序和相互关系；

c）确定所需采取的准则和方法,以确保这些环节和流程的运行及控制有效；

d）确保管理职责明晰、保障机制健全，以支持这些环节和流程的运行和监控；e）对这些环节和流程进行分析、监督和考核；

f）采取必要的措施，以实现数据质量管理目标和对这些环节和流程的持续改进。

5职责要求

数据质量管理者应对本单位与数据质量管理相关的工作作出规定，具有以下方面的职责：

a）指导推进、监督考核本单位工业数据流通、利用相关工作；

b）根据需要确保按照本文件的要求，建立、实施、保持并持续改进数据质量管理体系；

c）提出工业数据的数据目录规范、数据质量指标要求，制定数据质量管理规则，确保数据质量管理工作有明确的目标和评估标准；

d）向最高管理者报告数据质量管理情况和改进需求，提供数据质量监测和评估报告；e）负责与数据质量管理工作有关的外部联系工作；

f）对其他部门提出的数据质量要求及时进行处理和反馈，定期执行数据质量评估。

6数据质量管理指标

工业数据质量管理指标框架见图1，应基于此框架对工业数据进行数据质量的符合性评价。

图1质量管理指标框架

各质量特性的说明如下：

a）规范性：数据符合数据标准、数据模型、业务规则、元数据、权威参考数据及安全规范的程度。

1)数据标准是数据的命名、定义、结构和取值规范方面的规则和基准。

2)数据模型是对分析的图像和文本表述，该分析识别了组织为完成其使命、功能、目标、目的和战略，以及管理和评价组织所需要的数据。

3)业务规则是一种权威性原则或指导方针，用来描述业务交互，并建立行动和数据行为结果及完整性的规则。

4)元数据是关于数据或数据元素的数据(可能包括其数据描述)，以及关于数据拥有权、存取路径、访问权和数据易变性的数据。

5)权威参考数据是系统、应用软件、数据库、流程、报告或平台日志记录用来参考的特定字段的有效数据集合。

6)安全规范是安全和隐私方面的规则，包括数据权限管理、数据脱敏处理。

b）完整性：按照数据规则要求，数据元素被赋予数值的程度。即数据信息是否存在缺失的状况，包括数据元素完整性和数据记录完整性；

3

c）准确性：数据准确表示其所描述的真实实体(实体对象)真实值的程度，即数据记录的信息是否存在异常或错误，包括数据内容正确性、数据格式合规性、数据重复率、数据唯一性、脏数据出现率；

d）一致性：数据与其他特定上下文中使用的数据无矛盾的程度，即数据是否遵循了统一的规范数据集合是否保持了统一的格式，主要体现在数据记录的规范和数据是否符合逻辑，包括相同数据一致性和关联数据一致性；

e）时效性：数据在时间变化中的正确程度，包括基于时间段的正确性、基于时间点及时性、时序性；f）可访问性：数据能被访问的程度，包括可访问和可用性。

数据质量管理过程中数据质量评价应按GB/T36344-2018的