2.浅析Hadoop之YARN

Posted Kyhoon

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了2.浅析Hadoop之YARN相关的知识,希望对你有一定的参考价值。

YARN也是主从架构,主节点是ResourceManager,从节点是NodeManager,是一种资源分配及任务管理的组件

针对每个任务还有ApplicationMaster应用管理者和Container资源的容器 .

当客户端请求过来,首先向ResourceManager申请资源,ResourceManager根据任务的大小在某台NodeManager上以Container

资源的形式分配创建一个ApplicationMaster,接着由ApplicationMaster对具体任务的需要向ResourceManager申请资源,

ResourceManager也以Container的形式返回对应资源并分配到不同的NodeManager中,  再由ApplicationMaser对Container中启动

对应的任务,这些Container都会定期向ApplicationMaster报告心跳状态等,ApplicationMaster也会向ResourceManager汇报状态.

以上是关于2.浅析Hadoop之YARN的主要内容,如果未能解决你的问题,请参考以下文章

2.浅析Hadoop之YARN

1.浅析Hadoop之HDFS

浅析Hadoop之YARN

Hadoop之spark浅析

个人浅析Hadoop序列化与反序列化

七Hadoop学习笔记————调优之Hadoop参数调优