hadoop YARN

Posted 百里登风

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了hadoop YARN相关的知识,希望对你有一定的参考价值。

 

YARN产生的背景

回顾mapreduce1.0(以下是对应的框架)

 

 

 

JobTracker同事负责资源的管理和调度和作业的管理和调度

mapreduce1.0的缺点

1.扩展性差

 

2.另外一个缺点就是单点故障

 

3.资源利用率低

 

 4.通用性差

 

 

 什么是yarn

 

 

YARN在hadoop生态圈系统中的位置

 

 

YARN的基本架构

 

 

 

 

 

 

 

 

 

 

 

YARN的工作流程

 

YARN的工作流程--详细的

yarn工作流程--详细步骤

 

 

YARN的工作原理

 

 

MapReduce On Yarn

 

 

 YARN HA

 

 

以上是关于hadoop YARN的主要内容,如果未能解决你的问题,请参考以下文章

hadoop考点总结

七Hadoop学习笔记————调优之Hadoop参数调优

我眼中的大数据——Yarn和Hive

Spark任务提交源码

spark记录spark Core之RDD

hdfs:现有文件上的“没有这样的文件或目录”