数据工程师工作职责.docxVIP

  • 13
  • 0
  • 约5.17千字
  • 约 10页
  • 2023-08-02 发布于河北
  • 举报
Word文档下载后(可任意编辑) 第 第 PAGE 1 页 共 NUMPAGES 1 页 数据工程师工作职责 数据工程师工作职责 第一篇 职责: 负责数据仓库建设、设计、优化和落地 负责数据ETL任务开发及日常维护 对数据ETL任务进行性能调优及性能瓶颈分析 学习新技术,提高整个平台的计算能力和效率 任职要求: 计算机相关专业,全日制本科及以上学历,2-5年工作经验 熟识数据仓库理论基础,对数据模型建设、应用层建设有比较丰富的经验 娴熟使用 SHELL或PYTHON 熟识HADOOP相关的大数据技术:HDFS, MAPREDUCE, HIVE 能对HIVE进行性能分析及调优 有MAPREDUCE开发经验优先 良好的沟通能力、组织协调能力、应变能力, 极强的责任心、学习能力。 数据工程师工作职责 第二篇 职责: 1,负责软件系统的部署运行; 2、负责业务数据系统接入的规划和实施; 3,理解行业业务,梳理业务数据模型; 4,完成项目实施过程中各类文档的编写、收集、整理、归档; 5,与客户保持亲密沟通,建立良好的客户关系,保障良好的客户满意度; 有效的分析和掌握客户需求,解决项目实施过程中遇到的质量问题和管理问题。 岗位要求: 1、全日制本科以上学历,软件工程、计算机科学相关专业; 2、3年以上的软件/项目管理实施经验; 3、熟识Linux操作,娴熟编写shell/python脚本; 4、了解常用开源分布式系统Hadoop/Spark/Hive/Hbase; 5、娴熟使用SQL语句,熟识ETL工作; 6、熟识Oracle,mysql等关系型数据库; 7、具有剧烈的责任感与团队合作精神,杰出的沟通及学习能力; 8、有较强的分析问题能力,独立解决问题能力,能接受在客户公司办公。 数据工程师工作职责 第三篇 职责: 1、负责公司与阿里巴巴在新行业方向(新金融、新零售、国内外运营商)的产品研发; 2、负责分析挖掘客户/行业对大数据产品的需求(应用场景),利用数据分析结论提升客户业务能力。例如:文本挖掘,潜在客户挖掘,用户画像,独特化推举,用能预报等; 3、进行大数据场景下的数据统计、数据挖掘、机器学习、深度学习,包括数据整理、模型建立、模型应用、评估优化等; 4、将客户需求精确转化为可执行的数学模型,针对不同的应用场景,负责编写数据挖掘算法及对其的优化; 5、基于需求分析/运营支持/商业报告等成果,抽取典型用户/客户/行业/产品分析模型并与开发团队沟通实施方案及构建产品原型。 岗位要求: 1、本科以上学历,扎实的机器学习、数据挖掘、统计学理论基础;有统计、应用数学、金融等相关专业背景优先; 2、精通常见机器学习算法(如规律回来、SVM、神经网络、决策树、贝叶斯等),有实际建模经验,把握深度学习算法优先; 3、具有扎实的计算机操作系统、数据结构等编程基础,精通至少一门编程语言例如JAVA/python/R等; 4、熟识Map-Reduce模型,对Hadoop、Spark、Storm等大规模数据存储与运算平台有实践经验优先。 数据工程师工作职责 第四篇 职责: 参与数据仓库模型设计和开发工作; 负责建立数据分析模型,设计前端报表,数据可视化开发; 负责数据平台项目数据仓库的管理、性能监控及优化等; 负责数据平台的日常运维及优化 职位要求: 大学本科以上学历,3年以上工作经验,包含2年以上数据仓库开发工作经验; 精通数据仓库建设,熟识常用的模型设计方法; 对数据可视化有丰富的经验,熟识常用的数据分析方法;熟识至少一种报表工具开发; 精通数据仓库领域学问和技能,包括元数据管理、主数据管理、数据质量管理等; 娴熟使用ETL工具如Kettle、SSIS等进行数据清洗、转换、整合; 熟识至少两种关系型数据库,如Oracle、SQL Server、PostgreSQL、MySql等主流数据库,精通SQL Server开发和运维者优先考虑; 有完好的数据平台建设经验者优先; 熟识使用Linux系统及Shell脚本开发,娴熟开发Python程序者优先; 熟识大数据开发框架者优先,如

文档评论(0)

1亿VIP精品文档

相关文档