大数据平台架构师岗位职责（精选26篇）.pdfVIP

大数据平台架构师岗位职责（精选26篇）

大数据平台架构师篇1

1、负责公司大数据处理框架研发工作，设计与开发分布式存储、

数据处理与分析架构。

2、负责大数据平台与产品和相关技术的追踪及研究。

3、负责大数据的处理工作，以及业务数据提取、加载、转换处理

流程的开发和优化。

4、利用大数据平台工具对数据维护。

5、负责相关项目的技术支持和服务。

6、持续对系统的技术架构进行改进和优化。

大数据平台架构师岗位职责篇2

1.负责大数据项目整体架构规划，包括应用架构、技术架构、物

理架构和数据架构等;

2.负责指导工程师进行技术验证与实现，核心技术问题的攻关，

解决项目开发过程中的技术难题;

3.负责项目对外技术沟通，具有较强的沟通，表达和文档撰写能

力;

4.根据公司项目和业务发展特点，负责研究相关大数据前沿技术;

5.推动技术能力的沉淀。

大数据平台架构师岗位职责篇3

1.负责数澜大数据平台的架构设计和研发，建立数据生态服务，

解决海量数据面临的挑战;

2.管理和优化Hadoop、Spark等集群，计算作业的调优，保证

集群和平台的高效和稳定;

3.负责Hadoop、Spark、Flink的功能、性能和扩展，解决并实

现业务需求;

4.负责大数据产品的自动化、离线与实时计算、即席计算、数据

质量、数据安全、机器学习等平台的设计和开发;

5.调研和把握当前的最新技术，将其中的先进技术引入到自己的

平台中，改善产品，提升竞争力;

大数据平台架构师岗位职责篇4

1、负责大数据平台资源规划、权限控制、运维架构设计，为各产

品业务提供稳定、高效、安全的运行环境;

2、负责实时，离线数据分析处理及实时平台的建设和搭建

3、熟悉Flink流式计算引擎的使用以及源码原理，并且有相关的

流式处理平台的经验。

4、Java基础扎实，熟练掌握垃圾回收，网络，多线程编程，了解

python或scala

5、负责大数据平台技术架构、数据架构的分析与设计;

大数据平台架构师岗位职责篇5

1、建设大数据平台，主要技术为k8s,docker;

2、跟进开源社区的更新，阅读文档，验证feature;

3、阅读容器生态圈各组件的开源项目代码，开发新功能;

4、持续提升平台的性能和稳定性。

大数据平台架构师岗位职责篇6

职责：

(1)负责公司大数据平台搭建，相关的设计和技术开发工作，负责

大数据存储系统、分布式计算系统、数据集成、挖掘算法等的设计、

研发以及维护、优化工作;

(2)通过数据分析技术，挖掘有利于营销中各业务场景的变量或规

则类标签，以提升模型效果，为文旅、教育业务提供数学模型理论及

编程支撑;

(3)对接沟通业务系统研发团队和产品部门，提供数据驱动方面的

专业咨询方案，并对业务的大数据应用场景提出建设性意见;

(4)配合部门领导进行项目需求分析、设计开发工作。

任职要求：

(1)计算机、统计学，数学等相关专业本科以上学历，5年以上大

数据或文旅、教育数据产品设计开发经验，高效高质量产出需求和技

术文档;

(2)精通Hadoop，熟悉大数据生态技术，如Storm、Spark、

Scala、Flume、Kafka、Zookeeper、Hive、Hbase、Kerberos等，

有大规模集群架构、开发及运维经验;熟悉HDFS/MapReduce等;

(3)熟悉Java，能够独立应用python、R、SAS或类似分析工具

进行数据分析;

(4)熟悉大数据挖掘、可视化分析，各种BI算法和产品等，在计算

广告、搜索引擎、推荐系统、用户画像等有一个或多个算法领域的研

发经验，能够运用数据作为产品解决业务方运营及决策问题;

(5)有互联网