sh spark-submit-wordcount-pyspark-yarn-custom-capacity.sh

Posted 2021-05-07

tags:

篇首语：本文由小常识网(cha138.com)小编为大家整理，主要介绍了sh spark-submit-wordcount-pyspark-yarn-custom-capacity.sh相关的知识，希望对你有一定的参考价值。

spark-submit \
  --num-executors 10 \
  --executor-memory 3584M \
  --executor-cores 4 \
  --master yarn \
  --conf spark.ui.port=54123 \
  src/main/python/wordcount/WordCount.py \
  /public/randomtextwriter /user/dgadiraju/wordcount prod

以上是关于sh spark-submit-wordcount-pyspark-yarn-custom-capacity.sh的主要内容，如果未能解决你的问题，请参考以下文章

sh sh_template.sh

sh sh.sh

Linux下面如何运行 SH文件

配置告警系统主脚本main.sh mon.sh load.sh 502.sh disk.sh

shell 脚本各种执行方式（source ./*.sh, . ./*.sh, ./*.sh）的区别

linux下sh文件的运行