字节跳动数据血缘技术实现与具体用例（23页PPT）.pptxVIP

字节跳动

血缘技术实现与具体用例;02数据血缘优化;数据血缘模型;如何应对复杂庞大业务、海量存储和任务血缘？

如何保证模型的扩展性？

如何高效接入血缘？输出血缘？

如何保证血缘的实效性？

赋能业务;;;;;数据血缘优化;;;批量顶点并发查询

血缘服务批量查询图节点

图节点异步批量转化为实体;血缘数据开放式导出

元数据系统

数仓

API

Topic订阅;数据血缘用例;资产热度计算

热度和资产的权威性正相关

资产下游热度反馈上游

理解数据

我是谁？我从哪来？我要到哪里去？

根据上下游判断资产是否满足需求;影响分析

判断变更影响范围

通知下游变更

归因分析

透过现象看本质;链路状态追踪

重保核心链路

签署链路SLA保障

数仓治理

数仓规范化治理;安全合规检查

安全等级排查

标签传播

安全标签向下传播;;未来展望;数据血缘技术趋势

通用的血缘解析能力

非侵入式的非SQL类型血缘采集

时序血缘;云上的全链路血缘能力

全数据源类型覆盖，自定义接入新类型血缘

标准化的血缘应用

开放的血缘生态;非常感谢您的观看