interllj IDEA配置spark
Posted
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了interllj IDEA配置spark相关的知识,希望对你有一定的参考价值。
interllj IDEA是一个编译环境IDE,有免费的社区版。百度可以下载,这里不赘述,有了编译器需要安装scala语言支持,见前面的博客。
spark是一种类似多线程的结构,他的作用是将任务分发给多个节点一起计算提高速度,因此是有使用场景的,有的情况下不适用,比如迭代计算。
配置spark步骤如下:
第一步建立maven
第二步填写group id 类似于项目说明
点击下一步下一步直到finish,得到如下图:
第三步,导入jars包,将包的位置填写在file->project structure->librartes下。
jars包包含了spark,获取的方式在
网卡的一笔,下次再补充
以上是关于interllj IDEA配置spark的主要内容,如果未能解决你的问题,请参考以下文章