关于MapReduce 执行卡住

Posted 2020-11-07 zuoandfuturegirl

　　

　　在执行一个demo程序的时候发现，数据量不大，但程序始终卡在

　　18/05/21 23:18:28 INFO mapreduce.Job:  map 0% reduce 0%

　　解决步骤：

　　首先，查看日志。

　　如果是内存不足造成的。

　　在yarn的配置文件yarn-site.xml修改或添加，如下内容。

<property>
    <name>yarn.nodemanager.resource.memory-mb</name>
    <value>4096</value>
</property>
<property>
    <name>yarn.nodemanager.resource.cpu-vcores</name>
    <value>4</value>
</property>

　　然后从新启动。