智慧电子商务园区大数据平台数据接入质量规范.pdfVIP

智慧电子商务园区大数据平台数据接入质量规范

1范围

本文件规定了智慧电子商务园区大数据平台（以下简称“大数据平台”）的数据质量评价维度、数

据接入质量技术要求、数据质量评价方法和安全要求。

本文件适用于智慧电子商务园区接入大数据平台过程中的数据质量保障工作。

2规范性引用文件

下列文件中的内容通过文中的规范性引用而构成本文件必不可少的条款。其中，注日期的引用文件，

仅该日期对应的版本适用于本文件；不注日期的引用文件，其最新版本（包括所有的修改单）适用于本

文件。

GB/T5271.1信息技术词汇第1部分：基本术语

GB/T24662电子商务产品核心元数据

GB/T24663电子商务企业核心元数据

GB/T36318—2018电子商务平台数据开放总体要求

GB/T36344信息技术数据质量评价指标

GB/T37973信息安全技术大数据安全管理指南

3术语和定义

GB/T5271.1和GB/T36344界定的术语和定义适用于本文件。

4概述

大数据平台支持结构化数据、半结构化数据和非结构化数据等异构数据源采集数据，实现各类离线

数据、实时数据的采集与接入。针对大数据平台的数据接入，执行相应的质量评价标准，保证数据质量，

为智慧电子商务园区提供优质的数据服务。

5数据质量评价维度

指标框架

数据质量的评价主要包括八个维度：完整性、规范性、一致性、准确性、唯一性、关联性、时效性

和可访问性，数据质量评价指标框架见图1。

1

数据质量评价指标框架

完规一准唯关时可

整范致确一联效访

性性性性性性性问

性

图1数据质量评价指标框架

指标说明

5.2.1完整性

按数据规则要求，数据信息不应存在缺失的状况，数据缺失的情况可能是整个数据记录缺失，也可

能是数据中某个字段信息的记录缺失。不完整的数据所能借鉴的价值会大大降低。完整性评价指标见表

1。

表1完整性评价指标

指标名称指标描述计算方法

计算公式：=/

按照业务规则要求，数据集中应被赋值的数据元素的赋式中：

数据元素完整性

值程度。A=被赋值的数据集中元素的个数；

B=预期被赋值的数据集中元素的个数

计算公式：=/

按照业务规则要求，数据集中应被赋值的数据记录的赋式中：

数据记录完整性

值程度。A=被赋值的数据集中元素的个数；

B=预期被赋值的数据集中元素的个数

5.2.2规范性

5.2