Azkaban大数据调度系统应用与部署实战.pdfVIP

一、课程计划

目录

一、课工作计划.2

二、工作流程.4

1.工作流程产生背景.4

2.工作流调度实现方式.4

3.工作流调度工具之间的对比.5

三、Azkaban调度器.6

1.阿兹卡班介绍.6

2.Azkaban原理架构.7

3.Azkaban透明配置模式.7

3.1.单机服务器模式.7

3.2.双服务器模式.7

3.3.多执行器模式.7

4.Azkaban源码编译.8

4.1.编译环境.8

4.2.解压.源码.8

4.3.编译.源码.8

4.4.编译后安装包路径.9

四、Azkaban安装部署.10

1.single‑server模式配置.10

1.1.节点规划.10

1.2.解压配置.10

1.3.启动验证.11

1.4.登录网页.11

1.5.初次体验测试.12

2.双服务器模式配置.14

2.1.节点规划.14

2.2.mysql配置初始化.14

2.3.Web服务器配置.15

2.4.exec‑server服务器配置.17

2.5.负载启动.18

3.多执行器模式配置.19

3.1.节点规划.19

3.2.scp执行器服务器安装包到node‑3.19

五、Azkaban使用实战.20

一、课程计划

目录

一、课程计划2

二、工作流4

1.工作生背景4

2.工作流调度实现方式4

3.工作流调度工具之间对比5

三、Azkaban调度器6

1.Azkaban介绍6

2.Azkaban原理架构7

3.Azkaban三种部署模式7

3.1.soloservermode7

3.2.two-servermode7

3.3.multiple-executormode7

4.Azkaban源码编译8

4.1.编译环境8

4.2.源码解压8

4.3.编译源码8

4.4.编译后安装包路径9

四、Azkaban安装部署10

1.solo-server模式部署10

1.1.节点规划10

1.2.解压配置10

1.3.启动验证11

1.4.登录web页面11

1.5.初体验测试12

2.two-server模式部署14

2.1.节点规划14

2.2.mysql配置初始化14

2.3.web-server服务器配置15

2.4.exec-server服务器配置17

2.5.集群启动18

3.multiple-executor模式部署19

3.1.节点规划19

3.2.scpexecutorserver安装包到node-319

五、Azkab