Oozie作业调度剖析.pptVIP

什么是Oozie ? 1.Apache Oozie 是用于 Hadoop 平台的一种工作流调度引擎,用于运行Hadoop Map/Reduce和Pig 任务工作流.同时Oozie还是一个Java Web程序,运行在Java Servlet容器中。 2.Oozie工作流中的任务是在远程运行，Oozie负责任务的调度分发，将资源发送到JOB的运行环境。 3.Oozie工作流中拥有多个Action,所有的Action以有向无环图（DAG). 4.Oozie工作流通过HPDL来构造。 5.oozie是基于hadoop的调度器，以xml的形式写调度流程，可以调度java，pig，hive，shell，jar等等。 6.Oozie工作流中包含可控制的工作流节点(control flow node)和Action节点(action node)。 主要的功能有: Workflow： 顺序执行流程节点，支持fork（分支多个节点），join（合并多个节点为一个） Coordinator，定时触发workflow Bundle Job，绑定多个coordinator 怎么使用Oozie ? Oozie工作流程图 Oozie工作流程定义 Oozie 工作流是控制依赖有向非循环图 (DAG) 中安排的 Oozie 操作的集合。控制依赖（Control dependency）可