spark-submit 提交任务

Posted 薛定谔的猫!

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了spark-submit 提交任务相关的知识,希望对你有一定的参考价值。

将工程打成jar

 

放入到linux中

切换到[root@node4 Desktop]# cd /usr/local/development/spark-2.0-hadoop2.6/bin/

输入命令

[root@node4 bin]# ./spark-submit --class spark_1.mainA /home/node4/Desktop/scalaSparkWorkCountTest.jar 100

打印出结果

  

以上是关于spark-submit 提交任务的主要内容,如果未能解决你的问题,请参考以下文章

spark-submit提交任务到集群,分发虚拟环境和第三方包

spark-submit 提交任务

Spark-源码-Spark-Submit 任务提交

spark-submit提交任务到yarn错误

spark-submit提交任务时报错,Error initializing SparkContext

spark-submit提交程序,找不到类名