浅析Hadoop之YARN
Posted 好程序员
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了浅析Hadoop之YARN相关的知识,希望对你有一定的参考价值。
YARN也是主从架构,主节点是ResourceManager,从节点是NodeManager,是一种资源分配及任务管理的组件
针对每个任务还有ApplicationMaster应用管理者和Container资源的容器 .
当客户端请求过来,首先向ResourceManager申请资源,ResourceManager根据任务的大小在某台NodeManager上以Container
资源的形式分配创建一个ApplicationMaster,接着由ApplicationMaster对具体任务的需要向ResourceManager申请资源,
ResourceManager也以Container的形式返回对应资源并分配到不同的NodeManager中, 再由ApplicationMaser对Container中启动
对应的任务,这些Container都会定期向ApplicationMaster报告心跳状态等,ApplicationMaster也会向ResourceManager汇报状态.
程程倡导的讲解方式:代码示例[学以致用,不仅要知道理论,还要知道理论怎么付诸实践], 文字讲解[不仅知道要怎么用,还要知道是怎么回事], 画图讲解[有图有真相,用图的形式将代码嵌入到理论中,整体理解]
好程序员大数据二期班9月18日开班
本期优惠5000元
另外,好程序员郑重承诺:
学员毕业工资不过万,不收学费!
好程序员特训营自2014年开班至今,一直立志培养高薪,高能,高职的程序员人才,截至目前,好程序员学员就业均薪1万3以上,学员薪资最高达到2万9千元。现开设html5、JavaEE、大数据、android等高端精品课程,40人小班教学保证高品质,坚持100%全程面授。
好程序员,为高端而生
以上是关于浅析Hadoop之YARN的主要内容,如果未能解决你的问题,请参考以下文章