大数据开发工程师岗位的主要职责概述.docxVIP

大数据开发工程师岗位的主要职责概述 大数据开发工程师负责大数据平台的技术和产品的设 计、开发、优化和维护。以下是小编整理的大数据开发工程 师岗位的主要职责概述。 大数据开发工程师岗位的主要职责概述 1 职责： 1、 规划及建设大数据平台 ; 2、 负责大数据存储系统、分布式计算系统、挖掘算法 等设计、研发以及维护、优化工作 ; 3、负责分析、挖掘、对抗各种产品安全层面的恶意行 为; 4、 参与项目的系统设计和核心代码开发，指导和培训 其他工程师 ; 5、 整理和提交技术文档，负责核心功能模块的代码编 写和测试工作。 岗位要求： 1、 计算机、统计学等相关专业本科及以上学历，具有 深厚的数学、统计学和计算机相关知识，精通数据仓库和数 据挖掘的相关技术， 3 年以上大数据开发相关经验 ; 2、具有非常扎实的 Java 基础，熟悉 Shell 、Python 、R、 Scala 等一种以上语言 ; 3、算法基础扎实，熟悉常见的数据结构，了解分布式 算法和分布式系统的技术原理 ; 4、精通 MapReduce 设计方法或 Spark 计算框架、对 NoSQL，Hadoop、Hbase、 Spark 、 Hive 等主流云计算，大数 据相关软件有充分的了解，并且有实践经验，能解决应用中 的复杂问题 ; 5、熟悉大数据处理相关技术，包括但不限于 Hadoop、 Hive 、Hbase、Im