Spyder中运行spark
Posted 早晚成精
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Spyder中运行spark相关的知识,希望对你有一定的参考价值。
安装JDK SPARK并设置环境变量
安装spyder
启动spyder,在spyder-tools-pythonpath manager中添加2条环境变量
1.spark安装位置(通常在opt目录下)/python
2.spark安装位置(通常在opt目录下)/python/lib
解压在spark安装位置/python/lib 路径下的py4j-0.9-src.zip的压缩文件,至spark安装位置/python/lib
重新启动spyder
以上是关于Spyder中运行spark的主要内容,如果未能解决你的问题,请参考以下文章
为啥 Miniconda 没有运行最新版本的 Spyder?
Mayavi 不在 Spyder 中运行:抱怨“ValueError: API 'QString' ...”