腾讯云zeppelin中spark解释器组异常

Posted weixin_43776760

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了腾讯云zeppelin中spark解释器组异常相关的知识,希望对你有一定的参考价值。

现象:

zeppelin的interpreter配置界面spark解释器组中仅有%spark和%spark.knitr

原因:

interpreter目录(zeppelin的安装路径下,后续皆是)下的$interpreter.name文件夹中的interpreter-setting.json里面的group命名为spark,导致spark解释器组名称冲突

解决办法:

删除$interpreter.name文件夹

总结:

zeppelin的解释器组配置存在 conf/interpreter.json中,而解释器组的组成员及引用类等基础设置,是通过zeppelin启动时遍历 interpreter目录中各文件夹,读取其中interpreter-setting.json得到,以其中group值作为组名,跨文件的相同组名会覆盖

以上是关于腾讯云zeppelin中spark解释器组异常的主要内容,如果未能解决你的问题,请参考以下文章

Zeppelin 与 Kubernetes。在非本地模式的解释器设置中未指定 SPARK_HOME

Zeppelin使用spark解释器

在 HDP 2.6 上运行的 Zeppelin 0.7.0 上的 Spark2.2 解释器

Kubernetes 上的 Zeppelin Spark Master 设置

如何在 zeppelin 中将数组从 spark 绑定到 javascript?

在独立的 zeppelin 中启动 thrift 服务器