29-亿信ABI训练营第二期:ETI数据处理整合.pdfVIP

29-亿信ABI训练营第二期:ETI数据处理整合.pdf

  1. 1、原创力文档(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。。
  2. 2、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载
  3. 3、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
  4. 4、该文档为VIP文档,如果想要下载,成为VIP会员后,下载免费。
  5. 5、成为VIP后,下载本文档将扣除1次下载权益。下载后,不支持退款、换文档。如有疑问请联系我们
  6. 6、成为VIP后,您将拥有八大权益,权益包括:VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
  7. 7、VIP文档为合作方或网友上传,每下载1次, 网站将根据用户上传文档的质量评分、类型等,对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档
查看更多

ABI-数据整合简介

讲师:谢程

时间:2020年3月3日

培训目标

Target1

全面认识和了解

数据整合模块

Target2

熟悉数据整合模块功能

Target3

了解数据整合建模

过程完成简单的模

型建立

1数据建模理论

数据建模—什么是数据模型

数据模型是抽象描述现实世界的一种工具和方法,是通过抽象的实体及实体之间联

系的形式,来表示现实世界中事务的相互关系的一种映射。

业务模型领域模型逻辑模型物理模型

数据仓库模型的层次划分

数据建模—为什么进行数据建模

一般来说,通过数据建模能够帮助我们解决以下问题:

➢进行全面的业务梳理,改进业务流程。

➢建立全方位的数据视角,消灭信息孤岛和数据差异。

➢解决业务的变动和数据仓库的灵活性。

➢帮助数据仓库系统本身的建设。

数据建模—常用方法

范式建模法,是我们在构建数据模型常用的一个方法,该方法主要由Inmon所

提出,主要解决关系型数据库的数据存储,利用的一种技术层面上的方法。

数据建模—常用方法

维度建模法,Kimball最先提出这一概念。其最简单的描述就是,按照事实表,

维表来构建数据仓库,数据集市。

数据建模—常用方法

实体建模法,并不是数据仓库建模中常见的一个方法,它来源于哲学的一个流派。

从哲学的意义上说,客观世界应该是可以细分的,客观世界应该可以分成由一个个实体,

以及实体与实体之间的关系组成。

数据建模—工具

SQL:

1、运行效率更高

2、需要很好的技术能力

ETL工具:

1、操作简单、功能较强大

2、跨数据源(数据库、excel)

3、跨服务器

4、运行效率慢

2数据整合简介

01模块说明02设计区03运行区

数据整合简介—模块说明

数据整合模块是由我公司经过十多年的数据仓库和商业智能项目管理和实施经验总

结、知识沉淀,全力打造的一款同时满足大中小型数据集成和数据管控的实施利器。

主要具备以下特性:

➢敏捷开发模式,集数据建模和ETL设计于一体,能快速响应开发,灵活应对需求变动

➢开发者与应用者视角隔离,支持多人协同定义,共享资料库

➢内置丰富的数据处理组件

➢基于时间或事件的调度触发模式

➢批量加载和并行计算机制

数据整合简介—设计区

设计区分为ETL过程和ETL过程流。

数据整合简介—运行区

运行区区分为ETL过程、ETL过程流和调度管理。

3数据ETL步骤

操作流程

创创设设发创查

建建计计布建看

主目ETLETLETL调运

题的过过过度行

文档评论(0)

152****8691 + 关注
实名认证
文档贡献者

Sun认证程序员持证人

该用户很懒,什么也没介绍

领域认证该用户于2024年07月07日上传了Sun认证程序员

1亿VIP精品文档

相关文档