大数据运维工程师的主要职责说明（精选27篇）.pdfVIP

大数据运维工程师的主要职责说明（精选27篇）

大数据运维工程师的主要职责说明篇1

职责：

1、负责公司大数据集群的构建，任务调度、监控预警，持续完善

大数据平台，保证稳定性、安全性;

2、负责集群容量规划、扩容、集群性能优化及日常巡检和应急值

守，参与大数据基础环境的架构设计与改进;

3、深入研究大数据业务相关运维技术，持续优化集群服务架构，

探索新的Hadoop、Spark运维技术及发展方向;

4、具备ownership，故障排查能力，有很好的技术敏感度和风险

识别能力;

5、良好的服务意识，主动思考，自我驱动力。

任职资格：

1、熟悉RedHat、CentOS、Ubuntu系列Linux系统的配置、管

理、内核优化。能够独立编写(Shell/Python)脚本语言，脚本开展日

常服务器的运维;

2、熟悉hadoop生态圈Hadoop,Kafka,Zookeeper,Hbase,

Spark、YARN、Elasticsearch、Storm、Tomcat的安装、调试和运

维经验;熟悉分布式日志分析系统ELK及相关技术;

3、熟悉软硬件设备，网络原理，有丰富的大数据平台部署，性能

优化和运维经验;了解运维高容量、大流量、大并发Web系统的业务

知识以及解决方案;

4、工作认真负责，有较强的学习能力，动手能力和分析解决问题

的能力;

5、能够利用各种开源监控工具、运维工具，HA、负载均衡软件

完成工作任务;

6、mongodb、mysql等配置、调优和备份。

大数据运维工程师的主要职责说明篇2

职责:

1、负责大数据运维体系中的监控工作;

2、负责处理用户服务请求事件;

3、负责监控报警事件的处理;

4、负责协助完善监控体系;

5、负责监控平台运维工作，持续优化监控体系;

6、按时完成领导交办的其他相关工作。

任职要求：

1、大专及以上学历，计算机相关专业，1年以上大数据系统运维

经验;

2、熟悉linux操作系统，熟悉hadoop、hive、hbase、yarn、

spark、storm等组件的原理及运维方式;

3、熟悉中间件工作原理，对TOMCAT/jetty/nginx/微服务有一

定了解，具备一定的操作能力;

4、至少熟悉python/bash/shell一种或多种语言，可独立编写维

护及监控脚本;

5、有强烈的求知欲和钻研技巧，具有良好的独立分析问题与迅速

解决问题的能力;

6、有良好的职业责任心和团队协作意识;

7、能适应7*24小时三班倒工作时间。

大数据运维工程师的主要职责说明篇3

职责：

1.负责参与公司大数据基础架构平台规划，运维，监控和优化工

作，保障数据平台服务的稳定性和可用性;

2.研究大数据前沿技术，改进现有系统的服务和运维架构，提升

系统可靠性和可运维性;

3.负责公司Hadoop核心技术组件HDFS、Yarn、MapReduce、

HBase、Storm大数据存储计算核心的监控和日常运维工作。

4.独立完成大数据运维过程中问题定位、问题解决、并进行总结

及部门的大数据基础技能培训;

任职要求：

1.计算机、信息系统、数学或相近专业本科以上学历;

2.拥有至少3年以上Hadoop运维经验、具备基于CDH与HDP

的维护经验;

3.熟悉Hadoop大数据生态圈服务的工作原理，具备相关实战维

护经验，包括