数据治理平台化体系建设思路与实践.pdfVIP

《119_数据治理的平台化思路》

针对已有的数据仓库，此时可以做一套元数据系统，可以自动从已有的数据仓库里抽取你所

有的表和字段，你可以统一的对表和字段的含义，做一个定义，统一所有的指标和字段的含

义

元数据，业务元数据，技术元数据

业务元数据：分层、表、指标和字段的一些定义

技术元数据：你的每个ETL，血缘关系，每个ETL一般来说要耗费多长时间跑完，每个ETL

一般来说需要耗费多少资源，每个表里对应的一些数据量，每天的增量数据

数据地图系统：用可视化的界面给你展示出来你的各种元数据，你可以看到你的数仓的分层，

每一层的表，每个表的指标定义和含义，每个表的ETL，ETL之间的依赖关系，每个ETL耗

费多长时间跑，耗费多少资源，表的数据量

搜你想要查找的指标、表、ETL，ETL依赖关系

数据建模系统，在每一层里建模你需要的表，表的字段可以直接选用已有的字段，也可以建

立全新的字段，可以发起，可以看到这里的表定义，通过，此时就会自动给你进行

建表，元数据自动录入到元数据系统里去

ETL开发系统，写ETL，对ETL进试，ETL进行上线，配置一系列的数据质量规则，

元数据系统会自动抽取技术元数据过去

数据质量系统，自动会去根据你配置的规则检查你每天跑出来的数据是否准