【数据架构】大型集团公司数据架构总体设计方案.docxVIP

大型集团公司数据架构总体设计方案

TOC\o1-3\h\z\u1. 数据架构总体概述 2

1.1. 总体定位 2

1.2. 设计目标 3

2. 数据分布 4

2.1. 数据分类 4

2.2. 数据分布视图 7

2.2.1 数据分布设计概述 7

2.2.2 数据分布逻辑视图 7

3. 数据存储 8

3.1. 数据存储关注点 8

3.2. 数据存储视图 9

4. 数据流转 9

4.1. 数据流转视图 9

4.2. 主数据流转模式 12

5. 数据模型 15

5.1. 模型设计思路 15

5.2. 模型设计规范 16

5.2.1 表名命名规范 16

5.2.2 表字段命名规范 17

5.2.3 索引命名规范 17

5.2.4 主键、外键命名规范 18

5.2.5 视图命名规范 18

5.2.6 存储过程命名规范 18

5.2.7 触发器命名规范 18

5.2.8 其他约束规范 19

6. 数据管控 19

6.1. 数据管控体系 20

6.2. 数据标准管理 21

6.3. 数据质量管理 23

6.4. 数据安全管理 24

数据架构总体概述

总体定位

数据架构是XX集团财务集中管控平台设计项目的重要组成部分，数据是共享中心系统的重要资源，在系统设计时，首先要考虑数据架构对当前业务的支持，基于业务需求，定义出业务架构，围绕业务架构来分析及定义数据架构；然后根据数据架构结合业务功能定义应用架构，最后基于数据架构与应用架构的定义，来设计技术架构。

数据架构设计具体定位如下：

数据架构位于应用架构和技术架构之间，起到承上启下的作用。

应用架构的输出，是数据架构重要、核心的输入；数据架构规划是应用架构落地过程中的重要支撑。

数据架构中数据逻辑分布尽量遵从于业务架构和应用分布。

数据架构中的数据物理存储是从技术视角看逻辑分布，结合数据库技术、灾备等，给出相应的数据存储规划方案。

数据物理分布中的技术发展可能带来数据逻辑分布的优化，从而促进应用架构的完善和改进。

设计目标

数据架构从跨企业应用系统的视角统一对数据进行组织和规划，提高跨系统间数据存贮和共享的效率；从企业数据资产管理的角度，制定整个数据生命周期中数据的采集、存储、移动和访问环节中的策略、模型、流程。

数据架构的设计目标是建立统一和共享的数据视图，满足XX集团对数据统一性、标准性和扩展性的需求，从而实现业务支撑、协同交互、共享高效三个主要目标。

业务支撑，应满足财务集中管控平台现有业务的需求，支撑各类型数据的有效管理和快速检索的需要，为XX集团经营活动提供有力的数据支持和经营决策保障

协同交互：架构设计弹性灵活，满足财务集中管控平台对数据统一性、标准性和扩展性的需求，提升协同交互能力

共享高效：从跨企业应用系统的视角统一对数据进行组织和规划，设计流转方式，提高跨业务间数据存贮和共享的效率

数据分布

数据分类

按照数据存储结构可将数据分为两大类：结构化数据、非结构化数据。结构化数据主要包括应用系统直接产生的数据，即行数据，存储在数据库里，可以用二维表结构来逻辑表达实现的数据，包括：业务数据、基础库数据等。非结构化数据是指不方便用数据库二维逻辑表来表现的数据，主要包括：音频、视频、日志与图像文件等。

XX集团财务集中管控平台由于其应用功能固有特点，将产生大量的文本、扫描图片等非结构化、半结构化的数据，对这类数据的采集、存储、检索、分发、分析等管理提出了很高的要求。因此，非结构化数据分区将对一手采集到的非结构化数据进行转储，预分析处理，数据中心集中存档备份。重点在于平衡数据存储成本效率与计算处理效率，配合结构化数据的分析，提供分析应用场景下的非结构化数据支持。

根据数据分类原则，XX集团财务集中管控平台的数据划分为两个层级，

第一层为：结构化数据、非结构化数据。

第二层为：结构化数据划分业务数据、基础数据，其中业务数据包括明细事务数据、流程数据、分析数据。虽然流程数据从数据含义上属于业务数据范畴，但流程数据与业务数据存在格式及处理差异；基础数据划分为主数据、元数据、维度数据。非结构化数据划分为文件数据、图片数据，具体如下图所示：

详细数据分类如下表所示：

一级分类

二级分类

三级分类

数据分类描述

结构化

数据

基础数据

主数据

企业核心的业务共享数据，如财务组织、往来单位、会计科目、银行账号、供应商等

元数据

描述数据的数据，分为业务描述、技术描述、管理描述三类元数据，具体包括数据源映射信息、数据校验信息、数据节点血缘关系、业务数据字典、ETL监控日志信息

维度数据

统一的数据编码及名称，用