Hadoop 3.x yarn-site.xml 最小化配置参数

Posted 2022-06-13 ChengRuoFei

<configuration>
<!-- YARN应用程序resourcemanager插件安装的服务器地址 -->

<property>
<name>yarn.resourcemanager.hostname</name>
<value>C103</value>
</property>

<!-- YARN应用程序nodemanager运行的参数-->
<property>
        <name>yarn.nodemanager.aux-services</name>
        <value>mapreduce_shuffle</value>
</property>

</configuration>

################################################################

hadoop 3.3版本的额外配置：

额外修改配置文件，不然启动无法完成类的初始化，无法启动：

hadoop-3.3.3/etc/hadoop/yarn-env.sh

末尾增加：

export YARN_RESOURCEMANAGER_OPTS="--add-opens java.base/java.lang=ALL-UNNAMED"
export YARN_NODEMANAGER_OPTS="--add-opens java.base/java.lang=ALL-UNNAMED"

####################################################################

hadoop 3.1版本的额外配置：

hadoop/share/hadoop/yarn/ 目录下需要增加activation-1.1.1.jar，不然无法完成初始化启动。