- 1、本文档共29页,可阅读全部内容。
- 2、原创力文档(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
- 3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
- 5、该文档为VIP文档,如果想要下载,成为VIP会员后,下载免费。
- 6、成为VIP后,下载本文档将扣除1次下载权益。下载后,不支持退款、换文档。如有疑问请联系我们。
- 7、成为VIP后,您将拥有八大权益,权益包括:VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
- 8、VIP文档为合作方或网友上传,每下载1次, 网站将根据用户上传文档的质量评分、类型等,对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档
数据仓库工程师的主要职责(30篇)
数据仓库工程师的主要职责(精选30篇)
数据仓库工程师的主要职责篇1
职责:
1.建设公司级数据仓库,并根据业务变化持续迭代和优化;
2.对业务数据进行梳理和抽象,建设数据仓库的数据模型;
3.对业务数据进行采集、清洗、转换和存储;
4.支撑BI、用户数据、用户运营、用户画像、房源数据、推荐系统等核心数据平台产品;
5.研究大数据前沿技术,不断持续优化大数据平台,为业务提供价值。
任职资格:
1.本科及以上计算机、统计学、数据库、机器学习等相关专业,5年以上数据相关工作;
2.对业务数据有敏锐的理解能力,并能快速梳理和分析业务数据;
3.熟练掌握SQL语言、熟悉MySQL,对Shell、Java(主要开发语言)、Python编程非常熟悉;
4.熟悉常用的ETL技术和原则;精通数据仓库数据库设计规范和实操;
5.熟悉Hadoop、Hive、HBase、Spark、Storm等开源平台者优先;
6.具有较强的分析和解决问题的能力,良好的学习能力和团队合作精神,追求价值实现,认同目标管理和敏捷。
数据仓库工程师的主要职责篇2
职责:
1.负责企业级数据仓库设计、规划、建设、实施、管理,数据仓库架构设计与数据开发,创建数据仓库、数据集市
2.熟悉数据仓库领域知识,从架构和技术层面参与建设数据仓库,包括元数据管理、数据质量、主数据管理、性能优化和调优。
3.负责数据仓库平台相关数据管理工作,如研发规范、质量规范、保障规范的制定与推动实施落地
4.配合和协助数据分析/数据挖掘形成底层/中间层的业务逻辑切片
任职资格:
1.本科或硕士以上学历,计算机工程相关专业
2.熟悉大数据相关技术能力(Hadoop/MapReduce/Hive/Hbase等),熟练进行数仓Hive建设和软件架构,较强的数据抽象能力
3.精通SQL,具备海量数据处理和Hive/Spark性能调优经验,3年以上大规模分布式数据仓库建设经验
4.熟练使用Druid/Kylin之一进行数据挖掘模型设计,熟练掌握Java/Scala之一,具备良好的coding素养和习惯,了解脚本语言,如Python、Shell等
5.强烈的责任心,工作态度积极主动,有较好的团队精神和沟通能力,工作细致认真
数据仓库工程师的主要职责篇3
职责:
1、负责ETL开发、作业调度和数据平台建设
2、负责数据仓库的设计、开发和优化,建立结构层次合理、灵活可扩展的数据仓库
3、设计并研发BI分析相关的数据产品
4、结合对数据的理解和业务需求,对数据进行整理、分析和挖掘
任职要求
1、计算机相关专业本科及以上学历,有2年以上数据仓库、ETL工作经验
2、有海量数据处理、ETL及作业调度优化、数据仓库建模等经验
3、熟悉Linu_、SQL、Python或Java、Shell脚本,有Hadoop/Hive/Spark/HBase/Kylin/Impala等大数据技术使用经验
4、逻辑清晰,对数据敏感,深入了解业务,具备自己独特的想法并能提出合理的建议
数据仓库工程师的主要职责篇4
职责:
1、负责制定数据仓库平台技术体系架构、数据架构及规范;
2、负责设计和实施公司业务数据的实时/离线数据ETL架构方案;
3、负责调度架构设计与开发;
4、负责数据仓库平台运维以及日常数据运营等管理;
5、负责关键技术攻关;
任职要求:
1、5年以上数据仓库项目开发经验,参与过数据仓库架构设计,对ETL开发流程、调度架构有深入理解;
2、精通mysql、oralce、greenplum等至少一种数据库,丰富的SQL性能调优经验;
3、熟练使用Java、Shell、Python、Perl等至少一种脚本语言;
4、熟悉数据治理理论,数据质量、元数据管理流程和方法;
5、了解Hadoop/Hive/HBase/Spark/Storm等技术及其生态圈;
6、沟通能力好、责任心强,具有良好的团队合作精神和敬业精神;
数据仓库工程师的主要职责篇5
一、职责:
1、参与编写技术方案、需求分析、详细设计、操作手册等相关文档的撰写;
2、进行前期调研并参与产品设计工作,编写调研报告和需求规格说明书;
3、协助设计开发人员对需求进行理解;
4、参与系统功能验收工作及用户手册、新增产品功能培训资料的编写;
5、配合测试人员编写测试计划、测试用例、测试报告的编写、问题缺陷的发现及跟踪、产品用户手册编写等。
二、任职要求:
1、本科以上
您可能关注的文档
- 交通志愿者心得体会.docx
- 观《爸爸去哪儿》有感.docx
- 太阳能销售安装合同(11篇).docx
- 团结友爱的演讲稿(33篇).docx
- 运动会的解说词.docx
- 大学生会计社会实践心得体会范文.docx
- 和平分手离婚协议书(3篇).docx
- 亲子读书活动倡议书.docx
- 单位职工聘用合同(33篇).docx
- 旧机动车委托合同(10篇).docx
- 市直机关工委及个人述职述廉2024年党建工作情况报告材料.docx
- 区委书记在2025年一季度经济运行部署会议上的讲话发言材料.docx
- 市直机关单位、卫健委党支部2024年工作述职报告材料.docx
- 市委副书记、市长在2025年市委城乡规划委员会第一次会议上的讲话发言材料.docx
- 某单位领导干部2024年生活会、组织生活会对照检查材料(对照“四个带头”).docx
- 2024年民政局、宣传部、教育局基层主要领导个人述责述廉报告材料.docx
- 2025年2月党支部“三会一课”参考主题方案.docx
- 在某中学2025年春季开学典礼上的讲话:以“三重境界”燃动新学期.docx
- 2024年度领导干部专题民主生活会、组织生活会对照检查材料(四个带头)及学习研讨会上的发言材料.docx
- 市纪委市监委2025年度纪检监察工作计划.docx
文档评论(0)