spark实验--scala安装

Posted halone

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了spark实验--scala安装相关的知识,希望对你有一定的参考价值。

一、实验目的
(1)掌握在 Linux 虚拟机中安装 Hadoop 和 Spark 的方法; (2)熟悉 HDFS 的基本使用方法; (3)掌握使用 Spark 访问本地文件和 HDFS 文件的方法。

二、实验平台
操作系统:centos6.4; Scala版本:2.10.6.; Hadoop 版本:2.7.6。

三、实验过程

首先根据这篇博文https://www.cnblogs.com/Genesis2018/p/9079787.html安装Scala

输入wget http://downloads.lightbend.com/scala/2.10.6/scala-2.10.6.tgz下载Scala2.10.6

技术图片

 

 

 下载完成后输入

tar -zxvf scala-2.10.6.tgz
对下载后的文件进行解压,之后输入以下命令将解压后的文件移动到对应/usr/local/的位置
mv scala-2.10.6 /usr/local/
之后输入
gedit /etc/profile.d/scala.sh
在打开文件夹中添加
export SCALA_HOME=/usr/local/scala-2.10.6
export PATH=$PATH:$SCALA_HOME/bin
保存退出后输入
 source /etc/profile.d/scala.sh
使输入的命令生效
接着查看scala版本:
scala -version

技术图片

 

 Scala2.10.6安装成功

 

以上是关于spark实验--scala安装的主要内容,如果未能解决你的问题,请参考以下文章

spark实验四

在Spark上用Scala实验梯度下降算法

Spring boot结合Kafka的Demo

spark安装部署

BigDataScala语言的简要介绍以及在window下安装Scala

如何在idea中用maven配置spark和scala