大数据架构师的基本职责(10篇).pdfVIP

天将降大任于斯人也，必先苦其心志，劳其筋骨，饿其体肤，空乏其身，行拂乱其所为。——《孟子》

大数据架构师的基本职责(10篇)

大数据架构师的基本职责

职责：

1、负责公司大数据产品的架构设计，包含数据收集、数据存储、数据应用，

并完成相关架构设计文档的撰写;

2、参与规划从数据源到数据应用的整体流程，并参与相关产品的决策;

3、负责解决核心技术问题，对技术方案进行决策;

4、负责大数据研发团队建设、人才梯队培养和技术团队管理;

5、积极了解业界发展，研究与跟踪大数据新技术发展方向。

任职要求：

1、精通GoldenGateForBigData相关理论，具备大型数据利用的生产实战

经验;

2、精通数据驱动的理论，设计并生产上线相关数据驱动的产品;

3、精通常用消息中间件的使用，例如kafka/RocketMQ/ApachePulsar，有

解读相关源码者优先;

4、掌握hadoop、spark生态体系相关产品的使用，掌握MapReduce编程或

Spark编程;

5、了解传统数据仓库理论及相关ETL工具，例如kettle/datastage;

6、熟悉Oracle、Mongodb、Mysql数据库的使用;

7、扎实的Java语言基础，熟悉Java开发工具和调试工具的使用;

8、良好的团队协作精神，有能力对团队在软件设计、实现和测试方面进行

指导;

9、良好的逻辑分析能力和沟通能力，执行力强、对待工作认真严谨、责任

心强、具备出色的学习能力和团队合作精神，有一定的推动能力;

10、计算机科学、信息技术或相关领域本科以上学历，具有5年以上数据平

台项目开发经验，3年以上的架构设计经验，具有大数据平台应用大型项目架构

设计经验优先;

大数据架构师的基本职责

职责：

1

天将降大任于斯人也，必先苦其心志，劳其筋骨，饿其体肤，空乏其身，行拂乱其所为。——《孟子》

1、负责大数据开发团队建设;

2、负责行业大数据产品架构设计与研发;

3、负责带领团队进行行业大数据产品关键技术攻关。

任职要求：

1、有三年以上大数据应用、开发经验;具备海量数据加工处理(ETL)相关经

验，对数据挖掘及机器学习有较为深刻的理解;

2、熟悉Hadoop相关技术，对HDFS、MapReduce、Hive、HBase有一定的使

用和开发经验;

3、熟悉Linu_，熟练使用Shell或Python，进行脚本编写;

4、对数据结构和数据统计分析算法有较为深刻理解;

5、掌握至少一种主流关系数据库开发技术：Oracle、SQLServer、MySQL等;

6、掌握实时流计算技术，有Spark、Storm开发经验者优先;

7、需要具备2年以上研发团队管理经验。

大数据架构师的基本职责

职责:

1)负责公司软件产品整体架构的设计和关键功能实现

2)负责公司架构长期看护以及优化;

3)负责软件部门各模组间的协调配合;

4)提高巩固软件代码质量;