G-62大数据技术与应用项目竞赛规程修改竞赛软件环境.docVIP

2017年福建省职业院校技能大赛 “大数据技术与应用”赛项规程 一、赛项名称 赛项编号：G-62 赛项名称：大数据技术与应用 赛项组别：高职组 竞赛形式：团体赛 赛项专业大类：电子信息 二、竞赛目的 信息社会最重要的特征之一，就是每时每刻都在产生着海量的数据——大数据。海量的生产数据、处理数据和应用数据，将伴随着物联网、移动互联网、数字家庭、社会化网络等新一代信息技术应用不断增长。未来在智慧城市、电信、金融、卫生、电子商务以及电子政务等领域将是大数据技术与应用的最佳行业沃土，对大数据的处理和分析成为新一代信息技术的融合发展的核心支撑。 国家总理李克强在政府工作报告中提出，制定“互联网+”行动计划，推动移动互联网、云计算、大数据、物联网等与现代制造业结合，促进电子商务、工业互联网和互联网金融健康发展。“中国制造2025”是中国制造业未来10年设计顶层规划和路线图，它是信息技术与制造业的深度融合，是以制造业数字化、网络化、智能化为核心，叠加新能源、新材料等方面的突破而引发的新一轮变革。“互联网+”、“中国制造2025”进一步强化了市场对嵌入式应用开发、大数据处理等方面的人才需求，对大数据技术与应用专业改革具有重要意义。 大数据是由数量巨大、结构复杂、类型众多的数据构成的巨量数据集合。大数据的采集、清洗、存储、查找、传输、分享、分析及可视化等操作都超越了现有关系数据库与数据处理软件的承载能力。Google等一流企业为存储和计算所需海量互联网资源而开发了分布文件系统GFS、数据库BigTable和算法MapReduce，并公开成果。作为Google类似技术替代者的开源软件Hadoop，以及建立其上的软件逐渐成为大数据云存储与处理技术的主流。 本赛项的设置，是为适应大数据开发应用产业对高素质技术技能型人才的职业需求，覆盖大数据行业典型工作流程岗位，包括大数据平台与相关工具配置、数据抓取与清洗、数据处理与计算、数据分析与可视化展现等。开发类知识技能的考核围绕对Hadoop集群的安装部署、管理及MapReduce计算，数据抓取爬虫工具的配置与实际抓取数据的整理工作，并包含大数据处理相关算法应用与软件工具运用。赛项选取典型的大数据真实业务分析应用场景，重点检验参赛选手掌握大数据业务分析方法和方案架构能力、运用Hadoop及相关工具软件解决具体业务问题的能力，激发学生对大数据知识和技术的学习兴趣，提升学生职业素养和职业技能，努力为中国大数据应用产业发展储备及输送新鲜血液。 以大数据应用技能大赛，搭建校企合作的平台，提升高职电子信息类及相关专业毕业生能力素质，满足企业用人需求，实现行业资源、企业资源与教学资源的有机融合，使高职院校在专业建设、课程建设、人才培养方案和人才培养模式等方面，跟踪社会发展的最新需要，缩小人才培养与行业需求差距，促进专业教学建设和教学改革。 三、竞赛内容 赛项以大数据为核心内容和工作基础，在互联网、云计算、大数据应用的产业背景下，基于真实项目的工作过程，重点考察参赛选手在Hadoop平台环境下，对于大规模并行数据分析以及内存计算技术的应用能力，选拔高素质技能人才。 参赛选手需要针对竞赛选题，设计构建业务逻辑模型，形成业务设计文档，考察选手的业务分析能力；基于大数据实训平台，综合运用数据抓取爬虫工具，数据抽取工具Sqoop/Flume/Kafka、分布式存储系统HDFS、分布式计算框架MapReduce/Yarn、内存计算Spark、流式计算Storm、数据挖掘方法库Mahout、数据仓库Hive、深度学习、Java/Python等开发语言工具和技术，匹配和连接数据源，完成大数据的采集，提取、清洗、转换、分析、挖掘操作，产生分析结果，并且实现可视化呈现；依据项目应用需求和分析结果，完成标准化的大数据分析报告。 本赛项是对参赛选手大数据知识和应用能力的综合检验，在一定程度上促进了高职院校相关专业及课程建设，促进学生综合应用能力和职业素质的同步提高，提升毕业生的就业竞争力。 竞赛日程安排： 日期 时间 竞赛环节 2017.4.18 1号教学楼玻璃大厅报到 14:00-15:30 参赛选手报到 15:30-16:00 熟悉竞赛场地 16:00-16:30 指导教师会议。 16:30-17:30 封闭赛场 2017.4.19 福州市职业教育实训基地1号楼3层 8:20-8:50 裁判员工作会议 8:20-8:50 选手检录、抽取场地号、入场、检查设备及耗材 8:50-9:00 赛前说明及赛卷分发 9:00-14:00 正式比赛 14:00-17:00 竞赛成绩评定 17:00-17:30 竞赛成绩汇总上报 四、竞赛方式 1.竞赛以团体赛方式进行。 2.竞赛队伍组成：竞赛队伍由3名参赛选手组成，不得跨校组队。须为同校在籍学生。