在 hue 中运行 livy spark 服务器时出错

Posted

技术标签:

【中文标题】在 hue 中运行 livy spark 服务器时出错【英文标题】:Error in running livy spark server in hue 【发布时间】:2015-06-23 22:35:41 【问题描述】:

当我运行以下命令时

hue livy_server

显示以下错误

 Failed to run spark-submit executable: java.io.IOException: Cannot run program "spark-submit": error=2, No such file or directory

我已设置 SPARK_HOME=/home/amandeep/spark

【问题讨论】:

【参考方案1】:

如果您在本地模式下运行 Livy,它只会在其环境中找到 spark-submit 脚本。检查你的 shell PATH 变量。

【讨论】:

感谢帮助...实际上忘记在 bashrc 中为 spark_home/bin 添加路径变量

以上是关于在 hue 中运行 livy spark 服务器时出错的主要内容,如果未能解决你的问题,请参考以下文章

成功创建火花上下文后,Livy 会话卡在启动

使用 Livy 作为 OS 用户运行 spark 程序

Spark Livy Server:Python 脚本如何返回 json 对象?

Apache Spark和Livy集群

从 Airflow(使用气流 Livy 运算符)向 Livy(在 EMR 中)提交 Spark 作业

Livy原理详解