查看spark on yarn的日志和程序状态的方法

Posted zuizui1204

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了查看spark on yarn的日志和程序状态的方法相关的知识,希望对你有一定的参考价值。

转自:https://blog.csdn.net/high2011/article/details/52132646

一、在命令行使用命令查看

(1)查看日志:yarn logs -applicationId application_1469094096026_26612

(2)查看状态:yarn applicaiton -status application_1469094096026_26612

红色字体代表appID:在UI界面中寻找该id

技术分享图片

 

二、通过spark UI查询

 

技术分享图片

 

技术分享图片

 

技术分享图片

 

以上是关于查看spark on yarn的日志和程序状态的方法的主要内容,如果未能解决你的问题,请参考以下文章

yarn查看日志的几种方法

Flink On Yarn如何查看任务日志

Spark2x on yarn日志配置详解

Spark on Yarn遇到的几个问题

Spark on YARN配置日志Web UI

Spark基础学习笔记06:搭建Spark On YARN模式的集群