大数据系统工程实训 教案.docx

《大数据系统工程实训》教案

课程基本信息

项目

内容

课程名称

大数据系统工程实训

总课时

10课时（每课时45分钟）

适用专业

大数据技术、计算机科学与技术、数据科学

先修课程

Linux操作系统、MySQL数据库、Hadoop基础、Python编程、Java编程

教材

《大数据系统工程实训》

课程目标

知识目标

理解大数据系统工程的全流程：数据采集、清洗、存储、分析、可视化

掌握Python爬虫、DataX、Hive、Spark、FlinkCDC、ClickHouse等核心技术

理解数据仓库分层架构（ODS、DWD、DWS、ADS）

掌握离线数仓和实时数仓的构建方法

能力目标

能够使用P