YarnYarn 核心参数介绍

Posted 九师兄

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了YarnYarn 核心参数介绍相关的知识,希望对你有一定的参考价值。

1.概述

上一篇:【Yarn】Yarn资源调度器 我们学会了调度器相关的。

  • 在实际项目生产环境,需要调整配置YARN相关核心参数的值,才能更好的管理资源、调度任务执行及使用资源。

  • 主要针对RM、 NM、 Container组件进行设置。

相关参数默认值可以参考官方资料,默认位于yarn-default. xml中。用户可以在yarn-site. xml中覆盖。

https://hadoop.apache.org/docs/r3.1.4/hadoop-yarn/hadoop-yarn-common/yarn-default.xml

2.RM核心参数

针对ResourceManager主节 点来说,需要设置调度器类型及请求线程数据量。

3.NM核心参数

NodeManager运行在每台机器 上,负责具体的资源管理。

以上是关于YarnYarn 核心参数介绍的主要内容,如果未能解决你的问题,请参考以下文章

YarnYarn HA 高可用集群

YarnYarn HA 高可用集群

YarnYarn资源调度器

YarnYarn MapReduce 程序开发

YarnYarn 应用开发概述

yarnyarn 资源管理与资源隔离