一次yarn服务unhealthy状态处理

Posted 2022-05-07

自从hadoo集群新加了9个节点之后，有时候发现yarnweb页面有1个或者几个unhealthy状态的节点，但是过一会又正常了，但这种状态经常引起后台的监控的报警。查看了异常节点的日志
显示如下

yarn的本地日志目录使用超过了90%，然后df 看了下，根目录使用率100%了

才30G的大小怪不得
对比新老节点的磁盘大小发现老节点的大小在20T....
修改了新加节点yarn配置文件重新定义了中间态目录，重启服务后恢复正常。