数据治理数据资产中心.pdfVIP

数据治理I数据资产中心

作者介绍

@明明

美团资深产品，DalaFun分享嘉宾，数据人联盟创作者：

先后主导业务型、工具型、治理型数据产品工作，8次马拉松完赛经历，喜欢《三

体》，偶像章北海，立志成为一名受人尊敬的产品经理。

“数据人创作者联盟”成员.

)1

前言

这一期，我们来聊聊数据治理最最核心的部分——数据资产治理，本文

主要阐述数据资产治理的策略和工具建设思路。

)2

基本概念

广义的数据资产涵盖一切非结构化、半结构化和结构化数据，狭义的数

据资产主要包括业务侧的业务日志、流数据的topic、批数据的数据表、

生产调度任务/作业，模型层的指标、维度和数据集，应用层的报表、

API、应用/服务等，本文主要面向狭义的数据资产，其中又以大家接触

最多的数据表、数据指标、报表为主。

圜

问题分析

1）用户A是数据开发工程师，对数据表结构和内容较为熟悉，日常工

作内容主要是数据采集、数仓建模E（TL）和运维问题排查，主要需求

查询数据表上下游生产链路及生产调度作业的执行情况，同时也会随机

探查数据字段、枚举值和定义函数等内容来辅助进行数据开发。

2)用户B是业务侧数据分析师，具备基本的数据挖掘分析能力，口常

工作主要是面向业务一线产出数据分析报告、配置业务指标和报表，需

要根据业务需求查询的数据存储在哪张数据表，以及知悉数据表内各字

段的定义、枚举值等，从而确定是否满足查询需求。

3)用户C是数据管理人员，对数仓建模规范和数据口径定义比较熟

悉，日常工作主要是规范数据开发流程、降低数据资源存储和开发成

本，同时保隙业务报表产出及时性和质量，希望资产中心能提供统一的

口径维护、资产监控评测等能力。

用户用户特点痛点分析用户功能诉求

(1)数仓建模需要频繁对各业务

数据源进行数据探查.需要精

(1)研发工程师

玲找表.并知悉数据表字段定(1)通过搜索快速找表

(2)懂数据生产和建模过程

义和描述.知悉字段屋性和分(2)字段探查

用户A(3)懂数据结构

区划分等内容(3)血缘探查

(4)知晓基本数据源储内容和规

(2)运维向乏排查踞要知悉数据(4)任务/作业探查

范

表血^轻珞、关联上下满任务

/作业

(1)日常工作业务多样性场等复

杂性较高,需要须繁咨询相关

(1)通过搜索/知识图谱

业务负责人.对齐口径和注意

(1)业务数据分析师快速找人找数

⑵具备基本的0Q脚数能力事项(2)字段业务定义、口

用户B⑵整要快速获悉业务统计指标

⑶具各基本指标、数据集和报表