2019年DTCC：帮助传统企业实现大数据应用的数据架构_郑保卫_IT文库.pdfVIP

帮助传统企业实现大数据应用的 数据架构 郑保卫 | 恩核技术总监 | 2014.04.11 目 录 1 传统企业大数据应准备的事项 2 传统企业数据管理及应用现状 3 支撑大数据应用的数据架构 Chapter 01 将分散在不同系统中，标准不统一、 构建标准单词字典 结构不一致、内容不完整的数据整 构建标准用语字典 合到数据仓库中。 构建标准域字典 构建标准编码字典 构建数据标准管理体系 提高竞争优势 减低成本 吸引新客户 3 2 传统企业数据管理及应用现状 Chapter 02 5 Chapter 02-1 数据标准化是对分散在各系统中的数据提供一套统一的数据命名、数据定义、数据类型、赋值 规则等的定义基准。通过数据标准化可以防止用语的混乱使用 ，维持企业数据模型的一贯性 ，确保 数据的正确性及质量，并可以提高开发生产性和数据管理的一贯性和效率性。 数据标准化存在的问题 实现企业数据标准化 提高数据品质、减少管理费用、提高数据治理效率 对业务用语、单词、域、编码 建立数据标准管理组织 设计数据标准化流程 进行标准化 企业数据标准化体系 • 缺乏数据标准政策，将相同含义的数据进行了 • 业务单位或模块单位进行系统开发，可能会出 数据 不同名称的命名及管理 现子系统间定义的数据不能相互使用的问题 数据 统一 • 构建企业数据仓库等整合性数据库时加大了数 整合 • 相同名称的数据在各系统中以不同的含义使用 存在 据含义的理解难度和是判断重复存储的难度 问题 • 欠缺数据命名和数据定义的标准 • 缺乏对企业数据标准和监控步骤的管理，从而 新增 • 为了反映新需求时需要投入大量的时间了解数 导致不能有效地管理数据 运维 需求 据的含义从而不能及时地向用户提供所需信息 • 各系统使用不同的数据长度或数据类型，因此 难度 数据迁移时易出现错误 6 Chapter 02-3 区分 诊断内容 主要现况及问题  未对行为主体进行整合 ，导致数据出现重复 模型整