Hive异常:报错:org.apache.hadoop.conf.Configuration.getPassword(Ljava/lang/String;)[C-解决问题同时搭建Hive环境
Posted Philosophy7
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Hive异常:报错:org.apache.hadoop.conf.Configuration.getPassword(Ljava/lang/String;)[C-解决问题同时搭建Hive环境相关的知识,希望对你有一定的参考价值。
解决Hive执行HQL异常
一、问题分析
当我们进入Hive Shell窗口时,执行HQL操作将会报错:
Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient
然后还会报出异常
org.apache.hadoop.conf.Configuration.getPassword(Ljava/lang/String;)
我的环境是3.1的Hive和Hadoop3.x的,官方的解释是支持的,可能是jar包的绑定冲突,因为大数据是一个生态圈,可能一个不兼容的问题,导致整个的生态的崩溃。
所以万事不决洛必达
直接降版本
来到清华开源的软件镜像站,下载一个2.3.9的Hive
https://mirrors.tuna.tsinghua.edu.cn
/
点进apache下找到hive目录下,就能看到
二、解决问题
下载好之后上传到Linux系统当中,然后解压并配置环境变量
使用Derby数据库存储元数据
初始化元数据库bin/schematool -dbType derby -initSchema
使用mysql充当Hive元数据
这样做的好处就是多用户协调
1、将JDBC驱动拷入到Hive家目录下的lib目录
cp JDBC驱动包位置 $HIVE_HOME/lib
2、在Hive家目录/conf创建一个hive-site.xml文件
<?xml version="1.0"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>
<configuration>
<!-- jdbc 连接的 URL -->
<property>
<name>javax.jdo.option.ConnectionURL</name>
<value>jdbc:mysql://安装的机器上:3306/metastore?useSSL=false</value>
</property>
<!-- jdbc 连接的 Driver-->
<property>
<name>javax.jdo.option.ConnectionDriverName</name>
<value>com.mysql.jdbc.Driver</value>
</property>
<!-- jdbc 连接的 username-->
<property>
<name>javax.jdo.option.ConnectionUserName</name>
<value>mysql的用户</value>
</property>
<!-- jdbc 连接的 password -->
<property>
<name>javax.jdo.option.ConnectionPassword</name>
<value>mysql设置的密码</value>
</property>
<!-- Hive 元数据存储版本的验证 -->
<property>
<name>hive.metastore.schema.verification</name>
<value>false</value>
</property>
<!--元数据存储授权-->
<property>
<name>hive.metastore.event.db.notification.api.auth</name>
<value>false</value>
</property>
<!-- Hive 默认在 HDFS 的工作目录 -->
<property>
<name>hive.metastore.warehouse.dir</name>
<value>/user/hive/warehouse</value>
</property>
</configuration>
3、登录到MySQL创建数据库metastore
systemctl start mysql
mysql -uroot -p
create database metastore
quit
4、初始化元数据库
schematool -initSchema -dbType mysql -verbose
5 、启动Hadoop集群
$HADOOP_HOME/sbin/start-all.sh
6、启动Hive
bin/hive
show tables;
到这里就结束了,也就成功了,希望小伙们能记住这个问题,也别忘了收藏哦⭐⭐⭐
以上是关于Hive异常:报错:org.apache.hadoop.conf.Configuration.getPassword(Ljava/lang/String;)[C-解决问题同时搭建Hive环境的主要内容,如果未能解决你的问题,请参考以下文章