大数据运维工程师的基本职责（精选30篇）.pdfVIP

大数据运维工程师的基本职责（精选30篇）

大数据运维工程师的基本职责篇1

职责:

1、负责Hadoop平台搭建，运维，管理，故障处理。

2、负责保障大数据平台的高效运转、提升系统稳定性和安全性。

3、对平台的Hadoop，Hbase，Kafka，Hive等进行优化。

4、建立Hadoop集群管理和维护规范，包括版本管理和变更记录

等。

岗位要求:

1、有丰富的Hadoop生态系统的运维经验，了解Hadoop、

Storm、Spark、Kafka这些组件的原理，具备部署、实施、维护

hadoop及相关组件的能力;

2、至少精通Perl/Python/Shell脚本语言中的一种;

3、掌握Linux操作系统的配置，管理、优化以及各种常用命令，

能够独立排查及解决操作系统层的各类问题;

4、分析问题能力优秀，善于从各种系统、应用日志中寻找出问题

的原因。

5、有独立分析问题和解决问题的能力，能出差。

大数据运维工程师的基本职责篇2

职责：

1.负责大数据平台的稳定性和性能优化;

2.负责大数据项目的运维工作;

3.针对业务需求制定统一的运维解决方案;

4.完善自动监控报警系统，对业务层面关键指标进行监控与报警

通知;

任职要求：

1、熟练掌握hadoop平台搭建、维护，有平台优化经验;

2、熟悉HDFS、Hive、Spark、HBbase、Kafka、Flume等组件

的原理，有阅读源码能力者优先;

3、熟悉腾讯云产品，有腾讯云EMR使用经验者优先考虑;

4、熟练掌握java、python语言，熟练使用SQL，并有一定的优

化能力

大数据运维工程师的基本职责篇3

职责:

1、技术保障各底层支撑系统的可靠性与稳定性;

2、负责车辆网平台的运行监控的解决方案编制、实施与二次功能

开发;

3、负责技术文档手册编写，更新，经验总结沉淀，培训分享;

4、负责对新技术和方案进行调研，评估和引进，用技术去提升运

维生产效率

任职资格:

1、熟悉常见的应用服务部署和调优(Nginx、MySQL、Redis、

MongoDB、ELK，Hadoop等)，熟悉高可用集群、负载均衡集群的

规划与搭建;

2、熟练使用Linux、TCP/IP网络协议栈，了解常用的

Troubleshooting手段和常见性能指标

3、具有车联网平台运维的经验，精于容量规划、架构设计、性能

优化;

4、熟悉主流PaaS云产品的使用，具有运维平台开发经验者、参

与过开源产品的开发者优先;

5、优秀的沟通能力，出色的学习与钻研能力，良好的问题分析与

解决能力;

6、对行业技术敏感度高且细致，善于思考，乐于发现，对解决具

有挑战性问题充满激情。

大数据运维工程师的基本职责篇4

职责：

1、负责维护服务器的运行，包括巡检、故障排除、数据备份等业

务，保证服务器高质量、高效率运行状态;

2、负责服务器漏洞整改及补丁升级;

3、负责hadoop运维相关工作;

4、负责大数据平台的日常部署、升级、扩容、迁移;

5、负责高并发，大存储和实时流的Hadoop/spark大数据平台规

划，运维，监控和优化工作。

任职资格：

1、2年左右服务器运维经验;

2、对linux基础运维命令熟悉，shell,python至少精通一种，如

会scala语言可优先考虑;