spark常用命令
Posted willian
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了spark常用命令相关的知识,希望对你有一定的参考价值。
1:512mb 2核启动
./spark-shell --master spark://ip:7077 --executor-memory 512m --total-executor-cores 2
以上是关于spark常用命令的主要内容,如果未能解决你的问题,请参考以下文章
spark关于join后有重复列的问题(org.apache.spark.sql.AnalysisException: Reference '*' is ambiguous)(代码片段