Hive3.1.2使用CDH自带的Spark2.4报配置错误解决方案

Posted 江南独孤客

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Hive3.1.2使用CDH自带的Spark2.4报配置错误解决方案相关的知识,希望对你有一定的参考价值。


hive3.1.2用的cdh6.3.2中自带的spark2.4,在beeline客户端中,切换执行引擎为spark报错,报错为加载配置文件报加载不到

Hive3.1.2使用CDH自带的Spark2.4报配置错误解决方案_加载

解决方案

检查了hive-site.xml文件,缺了一个配置,就是spark.yarn.jars

Hive3.1.2使用CDH自带的Spark2.4报配置错误解决方案_spark_02

以上是关于Hive3.1.2使用CDH自带的Spark2.4报配置错误解决方案的主要内容,如果未能解决你的问题,请参考以下文章

Hive3.1.2自带的系统函数及UDF的随系统自动注册

0644-5.16.1-如何在CDH5中使用Spark2.4 Thrift

0645-6.2.0-为什么我在CDH6上使用Spark2.4 Thrift失败了

使用Java继承UDF类或GenericUDF类给Hive3.1.2编写UDF实现编码解码加密解密并运行在USDP大数据集群

使用Java继承UDF类或GenericUDF类给Hive3.1.2编写UDF实现编码解码加密解密并运行在USDP大数据集群

无法将 Spark 作为 Hive 执行引擎