腾讯云zeppelin中spark解释器组异常
Posted weixin_43776760
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了腾讯云zeppelin中spark解释器组异常相关的知识,希望对你有一定的参考价值。
现象:
zeppelin的interpreter配置界面spark解释器组中仅有%spark和%spark.knitr
原因:
interpreter目录(zeppelin的安装路径下,后续皆是)下的$interpreter.name文件夹中的interpreter-setting.json里面的group命名为spark,导致spark解释器组名称冲突
解决办法:
删除$interpreter.name文件夹
总结:
zeppelin的解释器组配置存在 conf/interpreter.json中,而解释器组的组成员及引用类等基础设置,是通过zeppelin启动时遍历 interpreter目录中各文件夹,读取其中interpreter-setting.json得到,以其中group值作为组名,跨文件的相同组名会覆盖
以上是关于腾讯云zeppelin中spark解释器组异常的主要内容,如果未能解决你的问题,请参考以下文章
Zeppelin 与 Kubernetes。在非本地模式的解释器设置中未指定 SPARK_HOME
在 HDP 2.6 上运行的 Zeppelin 0.7.0 上的 Spark2.2 解释器
Kubernetes 上的 Zeppelin Spark Master 设置