centos7安装spark集群

Posted 2020-11-27 mufeng07

tags:

篇首语：本文由小常识网(cha138.com)小编为大家整理，主要介绍了centos7安装spark集群相关的知识，希望对你有一定的参考价值。

安装前准备：

1.3台主机

2.安装jdk

3.免密登陆

开始安装spark

1.解压安装包

tar -zxvf spark-2.4.5-bin-hadoop2.7.tgz

2.修改配置文件

cd conf
cp spark-env.sh.template spark-env.sh
cp slaves.template slaves

修改spark-env.sh 追加

export JAVA_HOME=/root/jdk1.8.0_151

修改slaves

spark1
spark2
spark3

以上是关于centos7安装spark集群的主要内容，如果未能解决你的问题，请参考以下文章