大数据平台架构师岗位职责（精选18篇）.pdfVIP

大数据平台架构师岗位职责（精选18篇）

大数据平台架构师篇1

1.负责大数据项目整体架构规划，包括应用架构、技术架构、物

理架构和数据架构等;

2.负责指导工程师进行技术验证与实现，核心技术问题的攻关，

解决项目开发过程中的技术难题;

3.负责项目对外技术沟通，具有较强的沟通，表达和文档撰写能

力;

4.根据公司项目和业务发展特点，负责研究相关大数据前沿技术;

5.推动技术能力的沉淀。

大数据平台架构师岗位职责篇2

1、负责大数据平台资源规划、权限控制、运维架构设计，为各产

品业务提供稳定、高效、安全的运行环境;

2、负责实时，离线数据分析处理及实时平台的建设和搭建

3、熟悉Flink流式计算引擎的使用以及源码原理，并且有相关的

流式处理平台的经验。

4、Java基础扎实，熟练掌握垃圾回收，网络，多线程编程，了解

python或scala

5、负责大数据平台技术架构、数据架构的分析与设计;

大数据平台架构师岗位职责篇3

1.负责数澜大数据平台的架构设计和研发，建立数据生态服务，

解决海量数据面临的挑战;

2.管理和优化Hadoop、Spark等集群，计算作业的调优，保证

集群和平台的高效和稳定;

3.负责Hadoop、Spark、Flink的功能、性能和扩展，解决并实

现业务需求;

4.负责大数据产品的自动化、离线与实时计算、即席计算、数据

质量、数据安全、机器学习等平台的设计和开发;

5.调研和把握当前的最新技术，将其中的先进技术引入到自己的

平台中，改善产品，提升竞争力;

大数据平台架构师岗位职责篇4

1、建设大数据平台，主要技术为k8s,docker;

2、跟进开源社区的更新，阅读文档，验证feature;

3、阅读容器生态圈各组件的开源项目代码，开发新功能;

4、持续提升平台的性能和稳定性。

大数据平台架构师岗位职责篇5

1、负责公司大数据处理框架研发工作，设计与开发分布式存储、

数据处理与分析架构。

2、负责大数据平台与产品和相关技术的追踪及研究。

3、负责大数据的处理工作，以及业务数据提取、加载、转换处理

流程的开发和优化。

4、利用大数据平台工具对数据维护。

5、负责相关项目的技术支持和服务。

6、持续对系统的技术架构进行改进和优化。

大数据平台架构师岗位职责篇6

职责：

1、搭建基于Hadoop/Spark的数据挖掘体系和大数据分析系统

架构;

2、研究大数据领域前沿数据挖掘技术，并引入相应技术在数据中

心的使用;

3、进行大数据系统框架设计、模型算法开发;

4、负责大型数据挖掘项目方案制定、项目实施落地及优化等;

5、开展数据爬取、聚类分析、舆情分析、鱼骨图分析、定价策略

等领域数据挖掘工作;

任职资格：

1、本科以上学历(持有学士学位)(985，211优先)，计算机相关专

业，五年工作经验;

2、二年以上数据挖掘项目经验，完整参与过数据挖掘大数据平台

的架构开发过程，具备互联网行业背景优先;

3、精通分布式计算框架(hadoop、spark、Storm等)及相关经验，

熟练掌握Hive/SQL，Python，熟悉Python、R相关数值科学计算库

(NumPy,SciPy等);

4、了解传统的BI/DW理论，能结合传统BI实践设计大数据平台;

5、熟悉常用机器学习算法(如分类、回归、聚类、关联规则等)及

其原理，具备应用场景经验，如用户画像、商品关联度分析、舆情分

析;

6、熟悉主数据、元数据、数据质量、和数据建模等数据治理相关

的体系和方法;

7、具备较强的逻辑思维能力、数据敏感度，擅于利用数据发现问

题及解决问题;

大数据平台架构师岗位职责篇7

职责：

1、负责DMP技术架