hadoop mr 执行完毕,无法查看日志

Posted 点点滴滴的记录.

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了hadoop mr 执行完毕,无法查看日志相关的知识,希望对你有一定的参考价值。

Failed redirect for xxxxxxxxxxx
Failed while trying to construct the redirect url to the log server. Log Server url may not be configured Unknown container. Container either has not started or has already completed or doesn‘t belong to this node at all.

需要在mapred-site.xml 中添加
<name>mapreduce.jobhistory.address </name>
<value>hostName:10020</value>

<name>mapreduce.jobhistory.webapp.address</name>
<value>hostName:19888</value>

在 yarn-site.xml中添加

<property>
         <name>yarn.log.server.url</name>
         <value>http://hostName:19888/jobhistory/logs</value>
</property>

然后重新启动yarn,历史的不可查看。

 

以上是关于hadoop mr 执行完毕,无法查看日志的主要内容,如果未能解决你的问题,请参考以下文章

Hive查看执行日志

失败:执行错误,从 org.apache.hadoop.hive.ql.exec.mr.MapredLocalTask​​ 返回代码 1

多个线程运行MR程序时hadoop出现的问题

hadoop进阶系列之海量web日志KPI指标提取

FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask

集群模式下执行HQL提示`Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask`