Oozie框架介绍

Posted alexzhang92

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Oozie框架介绍相关的知识,希望对你有一定的参考价值。

Oozie框架:

1、Oozie英文翻译:驯象人
2、Oozie简介

一个基于工作流引擎的开源框架,由Cloudera公司贡献给Apache,提供对Hadoop Mapreduce、Pig Jobs的任务调度与协调。
Oozie需要部署到Java Servlet容器中运行。

3、Oozie在集群中扮演的角色
  定时调度任务,多任务可以按照执行的逻辑顺序调度。
4、Oozie的功能模块

  • Workflow:顺序执行流程节点,支持fork(分支多个节点),join(合并多个节点为一个)
  • Coordinator:定时触发workflow
  • Bundle Job:绑定多个Coordinator

5、Oozie的节点

  • 控制流节点(Control Flow Nodes):控制流节点一般都是定义在工作流开始或者结束的位置,比如start,end,kill等。以及提供工作流的执行路径机制,如decision,fork,join等。
  • 动作节点(Action Nodes):就是执行具体任务动作的节点。

以上是关于Oozie框架介绍的主要内容,如果未能解决你的问题,请参考以下文章

Oozie

大数据组件之oozie

Oozie框架基础

Oozie协作框架

作业流调度框架 oozie 使用

1.1-1.4 hadoop调度框架和oozie概述