大数据采集与分析技术-教案 -第3章 数据仓库的构建.docx

《大数据采集与分析技术》配套教学教案

第3章

课时内容

数据仓库的构建

授课时间

课时

6

教学目标

理解数据仓库和贴源层的作用，掌握Hive数据定义、HDFS文件操作、数据加载及Sqoop导入参数。

能够使用HiveQL创建贴源层库表，将文件数据加载到Hive，并使用Sqoop导入MariaDB中的天气数据。

培养规范的数据建模、数据质量责任、数据核查和精益求精的工程实践意识。

教学重点

贴源层数据库与表结构创建；HDFS文件上传；Hive数据加载；Sqoop关系型数据导入。

教学难点

源文件字段与Hive表结构的一致性；内部/外部存储路径与LOADDATA行为；Sqoop参数和字段映