元数据及数据质量介绍.pdf

元数据及数据质量介绍 议程内容 • 数据管控 • 元数据 • 数据质量 • 问题与讨论 2 2/23/2021 Confidential 随着数据仓库的不断成长，你能回答下 面的问题吗？ • 源系统发生变化后数据仓库到底需 要修改多少程序？ • 发生了多少次变化？从年初到现在 哪些系统变化最频繁？ • 某个ETL加工程序到 经过多少开发 人员的修改？每次改动的内容是什 么？ • 哪个源系统的数据质量最好？哪个 小组开发质量最高？ • 哪些字段采用了公共代码？代码映 射规则是什么？ • 哪些字段是需要做变形的敏感字段 ？在不同环境下同步的变形策略是 什么？ 3 2/23/2021 企业级信息管控体系 企业级信息管控 •战略性和策略性管理，项目所有权和优先次序设定 企业级信息管控 数据管理 •界定日常持续创建、使用和废止数据的职责 元数据 数据 元数据管理 管理 质量 •用来描述如何、何时和由谁来负责数据的接收、创建、 访问、修改和格式的数据 数据模型 主数据 数据 数据标准 管理 业务视图 标准 •数据的业务、技术规范性文档 数据质量 数据安全 数据 •数据满足特定使用的适用度，包括完整性和业务规则 与隐私 整合 遵从性 数据整合 •对各主题进行数据清理、转换、整合和丰富的流程 数据管理 数据安全与隐私 •各业务主题对安全性和保密性的要求，包括审计能力 人员、流程和技术 主数据管理 •数据资产以及定义企业运营的关系 4 2/23/2021 数据管控实施的三个方向 组织 • 组织： 建立企业级的数据管控团队是数据管控的基础。 • 角色：团队中按照管控的内容进行岗位的设置，即角色。 • 职责：不同的角色拥有详细的工作职责。 流程 • 流程：根据管控要求建立可执行工作流程，并严格执行工作流程。 • 规范：企业的各工作岗位有数据管控团队制订的工作规范。 • 制度：企业须建立数据管控的制度。 技术 •平台：数据管控团队的工作必须建立在自动化的高效的信息平台。 •接口：企业的信息系统之间应按照数据管控接口规范进行交互。 •模板：信息系统向数据管控平台提交数据可以通过标准模板。 5 2/23/2021 Confidential 数据管控特点 • 企业的分析型应用发展到一定的成熟度，就能发