Spark篇---Spark中yarn模式两种提交任务方式

Posted L先生AI课堂

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Spark篇---Spark中yarn模式两种提交任务方式相关的知识,希望对你有一定的参考价值。

一、前述

Spark可以和Yarn整合,将Application提交到Yarn上运行,和StandAlone提交模式一样,Yarn也有两种提交任务的方式。

二、具体

           1、yarn-client提交任务方式

  • 提交命令

以上是关于Spark篇---Spark中yarn模式两种提交任务方式的主要内容,如果未能解决你的问题,请参考以下文章

spark任务的提交流程(yarn)

Spark on YARN两种运行模式介绍

Spark篇---Spark中Standalone的两种提交模式

Spark on yarn的两种模式 yarn-cluster 和 yarn-client

spark on yarn

Spark之Yarn提交模式