元数据管理解决方案-2018.3.27(汇编).pdfVIP

精品文档 元数据解决方案 随着报价系统每年收集和使用的数据飞速增长，数据体量日趋增长，数据形 态多样化且不统一， 多种数据源之间的采集、 传播和共享遇到困难。 元数据管理 作为大数据治理的核心， 是有效管理这些数据的基础和前提， 在信息化建设中发 挥着重要的作用。如何理解、管理并发挥出元数据的价值，成为迫切的任务。 一、什么是元数据 元数据（ Metadata ）是关于数据的数据。元数据是描述数据仓库内数据的结 构和建立方法的数据。可将其按用途的不同分为两类：技术元数据（ Technical Metadata ）和业务元数据（ Business Metadata ）。 1. 技术元数据 技术元数据是存储关于数据仓库系统技术细节的数据， 是用于开发和管理数 据仓库使用的数据，它主要包括以下信息： 1) 数据仓库结构的描述，包括仓库模式、视图、维、层次结构和导出数据 的定义，以及数据集市的位置和内容。 2) 业务系统、数据仓库和数据集市的体系结构和模式。 3) 汇总用的算法，包括度量和维定义算法，数据粒度、主题领域、聚集、 汇总、预定义的查询与报告。 4) 由操作环境到数据仓库环境的映射，包括源数据和它们的内容、数据分 割、数据提取、清理、转换规则和数据刷新规则、安全（用户授权和存 取控制）。 2. 业务元数据 业务元数据从业务角度描述了数据仓库中的数据， 它提供了介于使用者和实 际系统之间的语义层，使业务人员也能够 读懂“ ”数据仓库中的数据。业务元数据 主要包括以下信息： 精品文档 精品文档 1) 使用者的业务术语所表达的数据模型、对象名和属性名。 2) 访问数据的原则和数据的来源。 3) 系统所提供的分析方法以及公式和报表的信息。 4) 企业概念模型、多维数据模型，业务概念模型与物理数据的依赖， 二、元数据的作用 元数据可以实现业务模型与数据模型的映射， 帮助用户理解数据仓库中的数 据；元数据清晰的描述了数据的来龙去脉， 描述了数据抽取转换规则， 是保证数 据质量的关键； 元数据管理系统可以把整个业务的工作流、 数据流和信息流有效 的管理，可以支持需求变化，从而提高系统的可扩展性；打通数据孤岛，统一数 据定义，形成企业级知识传承平台，元数据管理使得数据变的更有价值。 三、元数据管理 在大数据时代的背景下，数据即资产，元数据实现了信息的描述和分类的格 式化，从而为机器处理创造了可能，它能帮助企业更好地对数据资产进行管理， 理清数据之间的关系。 元数据管理是企业提升数据质量的基础， 也是企业数据治 理中的关键环节。 元数据管理不当， 信息很容易被丢失， 进而不能对业务进行有 效支撑，企业内部业务人员要识别相关信息就会变得十分困难， 最终用户也将失 去对数据的信任。 1. 元数据采集 技术元数据的采集，根据现有元数据设计出元模型，然后将数据仓库系统之 中的元数据按元模型集中汇总并关联到一起， 达到企业对数据统一管理与应用的 目的，ETL 等产生的元数据，对于元数据管理工具支持的格式可直接进行导入， 对于一些自定义的规则，需要进行格式转换并导入。 精品文档 精品文档 业务元数据相对复杂， 来源较广泛且不统一， 需要对业务系统进行深入理解， 按业务主题进行整理，梳理出业务范围、业务名称 、业务定义、业务描述、业 务关系等，并添加到元数据管理系统中。主要从以下几方面来进行梳理： 1) 业务平台中的各业务流程。 2)