数据要数治理体系规划设计方案 .pdf

数据要数治理体系规划设计方案

目录

1数据标准规范4

1.1标准文档管理4

1.1.1标准文档管理库建立4

1.1.2标准规范文档对接7

1.1.3数据标准管理数字化执行8

1.1.4数据标准管理流程8

1.1.5数据字典建立8

1.数据源管理9

1.2.1数据源维护管理9

1.2.2数据源类型定制化管理10

1.2.3数据源更新策略定制10

1.2.4数据源更新方式制定10

1.3元数据管理10

1.3.1元数据获取管理10

1.3.2元数据发布管理13

1.3.3元数据维护14

1.3.4元数据分析16

1.3.5元数据全文检索16

2数据汇聚与整合16

2.1基础数据汇聚与整合16

2.2基础数据查询与统计20

2.2.1领域20

2.2.2指标指数20

2.2.3范围21

2.2.4时间粒度21

2.2.5日期特征21

2.2.6时间特征21

2.2.7统计方法22

2.2.8数据来源22

2.2.9单位22

3数据治理与清洗23

3.1数据清洗23

3.2残缺数据清洗23

3.3错误数据处理23

3.4重复数据处理23

3.5数据脱敏23

3.6数据混淆24

4数据库建设24

4.1基础数据库24

4.2业务数据库25

4.3主数据库25

4.4指标数据库26

4.5共享数据库26

5数据监测与运维26

5.1系统监控26

5.1.1数据管理整体监控26

5.1.2异常情况实时报警26

5.2数据实时监控27

5.2.1运行情况预警和告警27

5.2.2检核任务执行日志及问明细的查看27

5.3数据追溯27

5.4异常处理27

5.5监控统计28

5.5.1数据监控信息统计分析31

5.5.2数据质量分析31

5.6监控配置33

本项目***数据资源中心建设以信都区***运输综合信息服

务与管理需求为导向，以加强信都区综合***行业日常行业监

管、运营管理与公众服务的数据采集、整合、分析为目的，对

应用系统建设所需的数据资源进行分析，开展整体的信息资源

规划和建设，完成基础数据库的整合建设，建设完善相关业务

数据库，建立行业辅助决策和行业运营监管相关主数据库和

共享数据库，实现数据资源的集中管理、实时更新、交换共享

与综合分析，同时为实现对智慧***行业可视、可测、可控和安

全监管，以及应急指挥和行业决策分析提供基础数据支撑。主

要包括数据资源规划、数据资源目录、数据采集接入、数据库

设计。

1数据标准规范

1.1标准文档管理

对国家、部、省等各级数据共享交换标准、数据结构标准

进行规范化管理。

1.1.1标准文档管理库建立

汇总整理行业标准文档，进行统一管理，建立标准文档管

理库，并分目录、分类别归类。标准文档管理库的建立需要建

立目录管理子系统。目录管理子系统的主要功能如下图：

(1)目录编目管理

目录编目管理系统主要功能是对数据资源和封装的服务组

件建立分类目录和索引，提供数据和服务资源元数据的编辑和

管理功能。主要功能需包括：

提取特征信息：提供系统自动编目和人工编目两种方式。

按