大数据技术专业人才培养方案（高职）.docxVIP

大数据技术专业人才培养方案 一、专业名称与专业代码专业名称：大数据技术专业代码：510205 二、入学要求 普通高中毕业生、中等职业学校毕业生或具有同等学历者 三、修业年限 基本学制：3 年 四、职业面向 大数据技术专业毕业生主要面向大数据行业中的 IT 公司，以及与大数据相关的教育、科研、金融、证券行业中的各级企事业单位，经过深入分析调研，明确大数据技术专业就业面向岗位、工作任务与岗位工作内容对应如表 1 所示。 表 1 大数据技术专业岗位与工作任务、岗位工作内容对应表 序号 专业岗位 岗位属性 岗位工作任务 岗位工作内容 1 数据采集 /网络爬虫工程师 核心岗位 数据采集 网络采集数据爬虫项目设计 收集分析客户需求，判断需求可行性，掌握数据情况； 实施数据筛选分析过程，对未知的数据进行评估，利用有效手段获取数据； 参与公司项目从立项到交付的全过程，对产品数据交付负责。 根据业务系统的规划设计，完成业务模块及核心框架的搭建及编码实现； 发现和解决业务模块及接口的技术问题，保证系统的性能和稳定性； 协同他人组织跨团队沟通协作，确保产品 设计合理或保障项目质量与进度。 2 大数据分析工程师 核心岗位 大数据统计预测大数据分析挖掘机器学习 行业数据统计 1、 根据业务需求，研究相关数据挖掘算法和数学模型，参与制定技术方案； 2、 参与大数据项目，指导数据分析模型的实施，并对模型结果进行评审； 3、与开发人员沟通协作完成算法实现，必要时独自完成算法设计与实现； 4、参与大数据平台研发和建设； 5、负责数据挖掘工具选型，指导业务非技术人员进行数据探索及挖掘工作 3 大数据开发工程师 核心岗位 大数据架构平台设计 存储平台优化 大数据平台提升 1、负责大数据平台开发需求沟通和分析，产出需求分析文档； 2、负责需求设计和开发，包括大数据存储、数据仓库、即席查询、olap 分析、数据爬取、机器学习等平台的技术选型和开发实施，并 交付生产，按时按质输出开发成果； 3、负责大数据平台应用的优化，精益求精，提高应用效率，提升用户体验，降低资源成本； 4、 负责预研新技术，并择机在公司内的推广应用、培训，以及对外对内合作交流，不 断提升公司的技术和应用能力。 4 大数据可视化工程师 核心岗位 数据可视化产品设计和展示 负责数据可视化产品及项目开发工作；设计数据可视化相关的技术方案； 负责数据可视化组件开发及新型展现形式研发；支持数据平台的相关可视化展示； 深入理解主要数据可视化展现形式，针对实际场景梳理数据信息，提出专业的数据可视化元素使用意见 5 大数据运维工程师 相关岗位 大数据运维，系统架构维护，处理数据架构故障 1、大数据平台的运维、调优 2、提升系统稳定性 3、大数据相关的运维自动化工作 4、新技术调研 通过分析岗位分析岗位任务和工作内容，确定大数据技术专业毕业生专业岗位与职业能力要求对应如表 2 所示。 表 2 大数据技术专业工作岗位与能力要求 序号 专业岗位 职业能力 1 数据采集/网络爬虫工程师 1、熟悉掌握多线程、网络编程，精通网页抓取原理及技术的实现细节； 2、熟悉基于规则的网页信息抽取，精通正则表达式； 3、从结构化的和非结构化的数据中获取信息，对网页数据抓取、信息提取、去重、清洗有一定经验； 4、了解分布式计算和储存技术以及相关原理； 5、热爱互联网，对搜索技术和探索未知领域有浓厚兴趣。 2 大数据分析工程师 1、熟练使用 Linux 操作系统，精通 Java 或 C++语言； 2、熟悉 Hadoop、Spark 等生态相关技术； 3、熟悉 NoSQL 生态环境；熟悉 Oracle 或 SQLServer、MySQL 数据库技术； 4、具有数据分析、数据挖掘理论知识； 5、有数据挖掘、机器学习、自然语言处理等领域大型项目研发经验。 3 大数据开发工程师 1、具备数据库系统基本理论知识，至少掌握一种主流商业数据库产品如 SQLServer/MySQL 的管理和应用，精通 SQL 语言； 对 Hadoop 的 Map/Reduce 原理有深入研究，有相关项目的实际开发经验； 熟悉 Hadoop、Hive 和 Hbase、Storm 等开源项目； 对基于 Hadoop 的大数据处理体系有深入研究，具备相关产品（Hadoop/Spark/Hive/Hbase）项目应用研发经验，熟悉分 布式系统、分布式计算系统的工作机制，具有大规模数据平台、高并发大型系统、大数据等架构设计和开发经验； 4 大数据可视化工程师 1、具有网页前端展现能力，掌握 CSS,Javascript, HTML5 等技术 ； 2、熟悉 jQuery ，熟悉 UI/图表类库，熟悉不同浏览器在可视化上的差异 ； 3、具有良好的美感，对数据可视化设计有较深的认识，有创