Sparks enableHiveSupport [重复]

Posted

技术标签:

【中文标题】Sparks enableHiveSupport [重复]【英文标题】:Sparks enableHiveSupport [duplicate] 【发布时间】:2017-01-04 17:21:18 【问题描述】:

使用 Sparks2/java,我的类路径中有 spark-hive_2.11-2.0.1.jar,但仍然得到:错误无法使用 Hive 支持实例化 SparkSession,因为找不到 Hive 类。

SparkSession.enableHiveSupport() 

还有什么需要做的

【问题讨论】:

【参考方案1】:

唯一可行的方法是更新 Maven 项目,让 Maven 发挥它的魔力:

<dependency>
     <groupId>org.apache.spark</groupId>
     <artifactId>spark-hive_2.11</artifactId>
     <version>2.0.0</version>
</dependency>

【讨论】:

以上是关于Sparks enableHiveSupport [重复]的主要内容,如果未能解决你的问题,请参考以下文章

基于 Hortonworks 2.6.1 的 Docker 中的 Pyspark 使用 EnableHiveSupport() 引发错误

Flex:MX + Sparks 与仅 MX 组件

吉他弹唱 taylor swift《 sparks fly》!

spark特殊问题 在IDEA中spark(enableHiveSupport)中使用 insert overwrite时对空表可以正常写入但是如果表不为空就会报错处理方法

Azure 流分析替代 Sparks mapWithState

如何创建一个 Spark 数据框以从 np.arrays 列表(由 RDKit 生成)提供给 sparks 随机森林实现?