Spyder中运行spark

Posted 早晚成精

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Spyder中运行spark相关的知识,希望对你有一定的参考价值。

  1. 安装JDK SPARK并设置环境变量

  1. 安装spyder

  1. 启动spyder,在spyder-tools-pythonpath manager中添加2条环境变量

1.spark安装位置(通常在opt目录下)/python

2.spark安装位置(通常在opt目录下)/python/lib

  1. 解压在spark安装位置/python/lib 路径下的py4j-0.9-src.zip的压缩文件,至spark安装位置/python/lib

  1. 重新启动spyder

以上是关于Spyder中运行spark的主要内容,如果未能解决你的问题,请参考以下文章

为啥 Miniconda 没有运行最新版本的 Spyder?

Mayavi 不在 Spyder 中运行:抱怨“ValueError: API 'QString' ...”

如何在 Spyder 中使用 argv

将远程服务器连接到 spyder 以运行 Python 代码

Spyder 控制台显示带有运行文件的文件路径

当我在 Spyder 中运行它以及直接在终端中运行它时,HIGH DPI Tkinter 重新缩放