ETL技术与应用：数据采集、处理及分析.pdfVIP

智慧学成第2章ETL

学习⽬标

1.理解ETL。2.理解数据执行

流程。3.能够并运行数据

系统。4.理解NiFi的工作流程。5.

能够使用NiFi维度数据。6.能

够分析课程量指标。7.能够编

写课程量Spark程序。

1ETL介绍

ETL(提取‑转换‑加载)是将数据从端经过抽取(提取)、转换(转换)、加载(加载)至目的端的过程。从数

据源抽取出所需要的原始数据，经过数据，最终将后的数据加载到数据仓库中去。也称为数

据仓库技术。

1.数据源通过的方式获取，保存到数

据仓库2.通过数据、处理完成落地到

数据仓库3.供业务使用

1.1数据抽取

数据抽取是从数据源抽取需要的原始数据，抽取的方式多种多样，要根据数据源的特点来确定，通常

有如下几种数据抽取的方式：

1、从关系数据库抽取数据

通常OLTP系统采用关系数据库业务操作数据，从关系数据库抽取操作型数据是最多的

一种数据抽取方式。

智慧学成第2章ETL

学习⽬标

1.理解ETL。

2.理解数据执⾏流程。