错误 - 在 windows 10/8.1 机器中通过 anaconda 使用 python pyspark

Posted 2023-04-15

【中文标题】错误 - 在 windows 10/8.1 机器中通过 anaconda 使用 python pyspark

【英文标题】：Error - pyspark with python via anaconda in windows 10/ 8.1 machine

【发布时间】：2017-07-30 06:11:58

【问题描述】：

Windows 10 或 8 机器无法识别 Pyspark。

我读过一些 *** 帖子，例如 Pyspark install、Unable to run pyspark，但他们说 spark 版本有问题。但我的问题是有没有其他方法可以在 Windows 机器上安装 pyspark 但又不会浪费太多时间来解决问题，因为我需要我的项目。请告诉我。

谢谢

【参考方案1】：

我建议另一种方法是使用 Cloudera VM。

如果您有个人 Windows 机器。请下载VirtualBox 并使用该虚拟机安装cloudera vm。

假设您有 16GB 的机器，因此为该 cloudera virtualbox 设置 8 GB。通过 virtualbox 启动 cloudera 虚拟机后。

打开终端并输入 pyspark。

现在您可以安装jupyter notebook，因为您可以保存您的工作区以供将来重复使用。根据您的问题，这是最耗时的方法。