G-62大数据技术与应用项目竞赛规程修改竞赛软件环境.DOCVIP

2017年福建省职业院校技能大赛 “大数据技术与应用”赛项规程 一、赛项名称 赛项编号：G-62 赛项名称：大数据技术与应用 赛项组别：高职组 竞赛形式：团体赛 赛项专业大类：电子信息 二、竞赛目的 信息社会最重要的特征之一，就是每时每刻都在产生着海量的数据——大数据。海量的生产数据、处理数据和应用数据，将伴随着物联网、移动互联网、数字家庭、社会化网络等新一代信息技术应用不断增长。未来在智慧城市、电信、金融、卫生、电子商务以及电子政务等领域将是大数据技术与应用的最佳行业沃土，对大数据的处理和分析成为新一代信息技术的融合发展的核心支撑。 国家总理李克强在政府工作报告中提出，制定“互联网+”行动计划，推动移动互联网、云计算、大数据、物联网等与现代制造业结合，促进电子商务、工业互联网和互联网金融健康发展。“中国制造2025”是中国制造业未来10年设计顶层规划和路线图，它是信息技术与制造业的深度融合，是以制造业数字化、网络化、智能化为核心，叠加新能源、新材料等方面的突破而引发的新一轮变革。“互联网+”、“中国制造2025”进一步强化了市场对嵌入式应用开发、大数据处理等方面的人才需求，对大数据技术与应用专业改革具有重要意义。 大数据是由数量巨大、结构复杂、类型众多的数据构成的巨量数据集合。大数据的采集、清洗、存储、查找、传输、分享、分析及可视化等操作都超越了现有关系数据库与数据处理软件的承载能力。Google等一流企业为存储和计算所需海量互联网资源而开发了分布文件系统GFS、数据库BigTable和算法MapReduce，并公开成果。作为Google类似技术替代者的开源软件Hadoop，以及建立其上的软件逐渐成为大数据云存储与处理技术的主流。 本赛项的设置，是为适应大数据开发应用产业对高素质技术技能型人才的职业需求，覆盖大数据行业典型工作流程岗位，包括大数据平台与相关工具配置、数据抓取与清洗、数据处理与、数据与可视化展现等Hadoop集群的安装部署、管理及MapReduce计算，数据抓取爬虫工具的配置与实际抓取数据的整理工作，并包含大数据处理相关算法应用与软件工具运用。方案架构能力Hadoop及相关工具软件解决具体业务问题的能力，学生对大数据知识和技术的学习兴趣，提升学生职业素养和，努力为中国大数据应用产业发展储备及输送新鲜血液。 以大数据应用技能大赛，高职电子信息类及相关专业毕业生能力素质，满足企业用人需求企业资源与教学资源，使 参赛选手需要针对竞赛选题，设计构建业务逻辑模型，形成业务设计文档，考察选手的业务分析能力；基于大数据实训平台，综合运用数据抓取爬虫工具，数据抽取工具Sqoop/Flume/Kafka、分布式存储系统HDFS、分布式计算框架MapReduce/Yarn、内存计算Spark、流式计算Storm、数据挖掘方法库Mahout、数据仓库Hive、深度学习、Java/Python等开发语言工具和技术，匹配和连接数据源，完成大数据的采集，提取、清洗、转换、分析、挖掘操作，产生分析结果，并且实现可视化呈现；依据项目应用需求和分析结果，完成标准化的大数据分析报告。 本赛项是对参赛选手大数据知识和应用能力的综合检验，在一定程度上促进了高职院校相关专业及课程建设，促进学生综合应用能力和职业素质的同步提高，提升毕业生的就业竞争力。 竞赛日程安排： 日期 时间 竞赛环节 2017.4.18 1号教学楼玻璃大厅报到 14:00-15:30 参赛选手报到 15:30-16:00 熟悉竞赛场地 16:00-16:30 指导教师会议。 16:30-17:30 封闭赛场 2017.4.19 福州市职业教育实训基地1号楼3层 8:20-8:50 裁判员工作会议 8:20-8:50 选手检录、抽取场地号、入场、检查设备及耗材 8:50-9:00 赛前说明及赛卷分发 9:00-14:00 正式比赛 14:00-17:00 竞赛成绩评定 17:00-17:30 竞赛成绩汇总上报 四、竞赛方式 1.竞赛以团体赛方式进行。 2.竞赛队伍组成：竞赛队伍由3名参赛选手组成，不得跨校组队。须为同校在籍学生。 赛项采用统一规格的硬件、软件和辅助工具，确保竞赛平台统一。 五、竞赛试题 比赛样题将于距省赛开始日5天之前公开。 六、竞赛规则 1.竞赛场地和场次通过抽签决定，竞赛期间参赛选手原则上不得离开竞赛场地。 2. 竞赛所需的软件和辅助工具统一提供，参赛队不得使用自带的任何有存储功能的设备，如硬盘、光盘、U盘、手机、随身听等。自行决定选手分工、工作程序和时间安排 竞赛过程中，选手须严格遵守操作规程，确保设备和人身安全，并接受裁判员的监督和警示。若因选手因素造成设备故障或损坏，无法继续比赛，裁判长有权决定终止该队比赛；若