spark源码走读环境搭建

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了spark源码走读环境搭建相关的知识,希望对你有一定的参考价值。


准备:
1.ubuntu操作系统
2.百度一下 IDEA, 到官网下载IDEA安装包  下载完成解压到指定目录下如:
tar -zxvf xxx,xxx -C /opt/idea


运行/optt/idea/xxx/bin/idea.sh如:

 

 

sh idea.sh

这个过程中可以选择安装 scala sbt 

 

开始:

3.sbt update gen-idea

4.用idea open 该目录 成功。

以上是关于spark源码走读环境搭建的主要内容,如果未能解决你的问题,请参考以下文章

Spark1.4源码走读笔记之模式匹配

Spark1.4源码走读笔记之隐式转换

emacs+ensime+sbt打造spark源码阅读环境

搭建Spark源码研读和代码调试的开发环境

基于spark mllib的LDA模型训练源码解析

源码编译搭建Spark3.x环境