399数据治理能力提升专项培训-主数据与元数据培训——.pptx

主数据与元数据培训方案

01理解主数据的整合需求02识别主数据03定义与维护主数据架构04实施主数据解决方案05分发主数据规则CONTENTS目录06理解元数据的需求07定义和维护元数据08定义基础数据与指标数据09管理使用元数据

01理解主数据整合需求-信息经济的“货币”，早已不限于数字形式数据的价值被不断认可，“数据资产化”已经成为了企业发展的重要组成部分。长期以来，数据被理解为以数字形式存储的信息，而目前技术可以测量更多的事件和活动，人们可以收集、存储并分析这些不被视为传统数据的各类信息，如邮件图片、音视频等。数据可根据其特性及治理方法差异划分为内部数据与外部数据，结构化数据、非结构化数据与半结构化数据，元数据与主数据等。数据抽象的内容，独立时无意义信息经过收集和整理的数据知识经过人为解读和经验充实信息智慧产生辨析判断、发明创造能力分类标准数据类型定义以及特征举例数据治理常用数据类型按照数据格式分类按照数据来源分类元数据主数据实时数据是描述数据的数据(描述性标签)描述了数据(如数据元素、数据模型)相关概念(如业务流程、应用系统、软件代码、技术架构)以及他们之间的联系结构化数据非结构化数据半结构化数据企业内部数据企业外部数据描述企业核心实体的一组一致而统一的标识符和拓展属性，实体可包括现有或潜在客户、产品、服务、员工、供应商、提供商、层次结构和会计科目表等是在收集后立即传递的信息，所提供信息的及时性没有延迟可以存储在传统的关系型数据库中，用二维表结构来表达实现的数据，可以用关系型数据库存储形式相对不固定，不方便用数据库二维逻辑表来表现的数据，通常存储在非关系型数据库中，数据量通常较大在企业内部经营中产生的数据，在企业的业务流程中产生或在业务管理规定中定义受企业经营影响介于结构化与非结构化之间，半结构化数据可以通过灵活的键值调整获取相应信息，且数据的格式不固定企业通过公共领域合规获得的数据，其产生、修改不受公司影响数据标准、业务术语、指标定义实体型组织、客户、人员基本配置实时OLAP场景下的数据Excel表格、SQL数据库里的数据文本、图片、HTML、各类报表和音频、视频日志文件、XML文档JSON文档、Email等实合同、项目、组织国家、币种、汇率这里回归到数据治理

01理解主数据整合需求-主数据管理是数据治理必不可少的环节、更是抓手数据服务与应用数据源社交媒体社会机构互联网第三方机构HRCRM财务ERPOAMES数据治理数据治理环节开始，对数据清洗加工，对整个企业内部的数据集进行规范和定义数据存储数据计算分布式文件系统分布式NoSQL数据库分布式关系数据库数据仓库数据湖内存计算在线流式计算批量离线计算机器学习模型训练服务接口智能BI数据分析可视化分析精准营销预测性维护智慧决策智能推荐······贯穿数据使用周期，是实现大数据必不可少的阶段数据标准管理数据模型管理主数据管理元数据管理数据治理管理数据安全管理数据共享管理数据资产管理数据治理环节数据治理以数据源汇入为伊始，对数据进行清洗加工，并在数据存储、数据计算、数据服务应用等环节予以持续的治理服务，是企业实现数据服务与应用的重要环节。从数据层面来看，数据本身存在着从生产到消亡的生命周期，而数据治理会在数据生命周期的各阶段通过相应工具与方法论进行规范与定义，在企业内部构建出切实有效的数据闭环，使数据发挥出更大的价值。维护企业重要业务核心数据的一致性、统一性、准确性，支撑企业业务流和工具链的打通和串联

数据服务与应用01理解主数据整合需求-主数据管理是数据治理必不可少的环节、更是抓手5

01理解主数据整合需求-什么是主数据维基百科：主数据是在企业中可以共享的、一致的业务实体，是跨系统、跨应用和跨流程的基础数据的唯一来源，包括业务数据、非结构数据、分析型数据、组织架构数据和元数据。Gartner：主数据是描述企业核心实体的、跨业务流程的、统一的数据标准和属性。ISO标准：主数据是指事务处理需要参考的独立的基础数据实体。总结：主数据是指具有高业务价值的、在企业内部跨越部门和系统（操作/事务型应用系统和分析型系统）被重复使用、多系统共享的数据，具有相对静态的特点，是单一的、准确的和权威的数据来源。客商、组织、人员、物资、项目、财务科目是常见的描述主数据的核心业务实体数据。企业数据交易数据主数据分析数据展现业务流程的运行状态-数量、订单、库存、余额、付款等展现业务对象-物料、产品、客户、供应商、员工等展现业务绩效-趋势、预测主数据3个特征高价值高共享相对稳定 4个跨越跨越部门跨越业务跨越系统跨越技术

01理解主数据整合需求-某项目案例主数据痛点分析信息化的建设投入与收益不相匹