大数据采集与分析技术-课程教学大纲.docxVIP

《大数据采集与分析技术》课程教学大纲

【课程名称】《大数据采集与分析技术》

【课程类型】专业核心课

【授课对象】大数据技术、大数据技术与应用、计算机科学与技术及其他计算机相关专业

【学时学分】64学时，4学分

【课程概况】

《大数据采集与分析技术》课程是面向大数据技术及相关专业开设的专业核心课程，课程以交通数据统计分析项目为主线，围绕数据采集、数据存储、数据仓库构建、数据清洗与转换、主题加工与分析以及数据可视化，系统介绍大数据项目实施的完整流程。

本课程采用项目引领、任务驱动和工单实施的教学方式，结合Hadoop高可用集群、Hive、HDFS、ZooKeeper、Vue.js、ECharts等技术工具，将数据采集、存储、处理、统计分析和可视化展示融入真实业务场景，帮助学生建立从原始数据到分析结果的完整认知。

本课程要求学生具备Linux操作系统、计算机网络、数据库和程序设计基础，能够进行虚拟机、命令行工具和常用开发环境的基本操作。

【课程目标】

通过本课程学习，学生应达到以下目标：

1．知识目标

（1）掌握数据仓库的分层思想及各层特点，理解数据采集、存储、清洗、转换、加工和分析的基本流程。

（2）掌握大数据集群平台、Hadoop高可用集群、HDFS、Hive和ZooKeeper的基础知识。

（3）掌握数据迁移工具的基本原理和使用方法，理解批量数据导入、数据仓库构建