搭建spark+hadoop平台
Posted 鎏鑫岁月
tags:
篇首语：本文由小常识网(cha138.com)小编为大家整理，主要介绍了搭建spark+hadoop平台相关的知识，希望对你有一定的参考价值。
1、安装jdk
2、安装scala，更改/etc/profile
加入：
export SCALA_HOME=/root/bigData/scala-2.11.8
export PATH=${SCALA_HOME}/bin:$PATH
source /etc/profile 生效
测试：直接输入scala
以上是关于搭建spark+hadoop平台的主要内容，如果未能解决你的问题，请参考以下文章
hadoop_hive_zookeeper_kafka_spark平台搭建
走进大数据 | hadoop spark环境搭建及idea scala maven集成开发spark任务
大数据平台搭建：Hadoop-3.1.3+Hive-3.1.2+HBase-2.2.3+Zookeeper-3.5.7+Kafka_2.11-2.4.0+Spark-2.4.5