大数据架构师的岗位职责.docxVIP

大数据架构师的岗位职责 1 职责： 1、负责公司大数据产品的架构设计，包含数据收集、数据存储、数据应用，并完成相关架构设计文档的撰写; 2、参与规划从数据源到数据应用的整体流程，并参与相关产品的决策; 3、负责解决核心技术问题，对技术方案进行决策; 4、负责大数据研发团队建设、人才梯队培养和技术团队管理; 5、积极了解业界发展，研究与跟踪大数据新技术发展方向。 任职要求： 1、精通GoldenGate For BigData相关理论，具备大型数据利用的生产实战经验; 2、精通数据驱动的理论，设计并生产上线相关数据驱动的产品; 3、精通常用消息中间件的使用，例如kafka/RocketMQ/Apache Pulsar，有解读相关源码者优先; 4、掌握hadoop、spark生态体系相关产品的使用，掌握MapReduce编程或Spark编程; 5、了解传统数据仓库理论及相关ETL工具，例如kettle/datastage; 6、熟悉Oracle、Mongodb、Mysql数据库的使用; 7、扎实的Java语言基础，熟悉Java开发工具和调试工具的使用; 8、良好的团队协作精神，有能力对团队在软件设计、实现和测试方面进行指导; 9、良好的逻辑分析能力和沟