浅析Hadoop之YARN

Posted 好程序员

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了浅析Hadoop之YARN相关的知识,希望对你有一定的参考价值。

YARN也是主从架构,主节点是ResourceManager,从节点是NodeManager,是一种资源分配及任务管理的组件

针对每个任务还有ApplicationMaster应用管理者和Container资源的容器 .

当客户端请求过来,首先向ResourceManager申请资源,ResourceManager根据任务的大小在某台NodeManager上以Container

资源的形式分配创建一个ApplicationMaster,接着由ApplicationMaster对具体任务的需要向ResourceManager申请资源,

ResourceManager也以Container的形式返回对应资源并分配到不同的NodeManager中,  再由ApplicationMaser对Container中启动

对应的任务,这些Container都会定期向ApplicationMaster报告心跳状态等,ApplicationMaster也会向ResourceManager汇报状态.

程程倡导的讲解方式:代码示例[学以致用,不仅要知道理论,还要知道理论怎么付诸实践], 文字讲解[不仅知道要怎么用,还要知道是怎么回事], 画图讲解[有图有真相,用图的形式将代码嵌入到理论中,整体理解]



程序员大数据二期班9月18日开班

本期优惠5000

另外,好程序员郑重承诺:

学员毕业工资不过万,不收学费!


好程序员特训营自2014年开班至今,一直立志培养高薪,高能,高职的程序员人才,截至目前,好程序员学员就业均薪1万3以上,学员薪资最高达到2万9千元。现开设html5、JavaEE、大数据、android等高端精品课程,40人小班教学保证高品质,坚持100%全程面授。
好程序员,为高端而生




以上是关于浅析Hadoop之YARN的主要内容,如果未能解决你的问题,请参考以下文章

1.浅析Hadoop之HDFS

浅析Hadoop之YARN

2.浅析Hadoop之YARN

Hadoop之spark浅析

个人浅析Hadoop序列化与反序列化

hadoop考点总结