Hive异常:报错:org.apache.hadoop.conf.Configuration.getPassword(Ljava/lang/String;)[C-解决问题同时搭建Hive环境

Posted Philosophy7

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Hive异常:报错:org.apache.hadoop.conf.Configuration.getPassword(Ljava/lang/String;)[C-解决问题同时搭建Hive环境相关的知识,希望对你有一定的参考价值。

解决Hive执行HQL异常

一、问题分析

当我们进入Hive Shell窗口时,执行HQL操作将会报错:
Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient

然后还会报出异常
org.apache.hadoop.conf.Configuration.getPassword(Ljava/lang/String;)

我的环境是3.1的Hive和Hadoop3.x的,官方的解释是支持的,可能是jar包的绑定冲突,因为大数据是一个生态圈,可能一个不兼容的问题,导致整个的生态的崩溃。
所以万事不决洛必达
直接降版本
来到清华开源的软件镜像站,下载一个2.3.9的Hive
https://mirrors.tuna.tsinghua.edu.cn/

点进apache下找到hive目录下,就能看到

二、解决问题

下载好之后上传到Linux系统当中,然后解压并配置环境变量

使用Derby数据库存储元数据

初始化元数据库

bin/schematool -dbType derby -initSchema

使用mysql充当Hive元数据

这样做的好处就是多用户协调

1、将JDBC驱动拷入到Hive家目录下的lib目录

cp JDBC驱动包位置  $HIVE_HOME/lib

2、在Hive家目录/conf创建一个hive-site.xml文件

<?xml version="1.0"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>
<configuration>
 <!-- jdbc 连接的 URL -->
 <property>
 <name>javax.jdo.option.ConnectionURL</name>
 <value>jdbc:mysql://安装的机器上:3306/metastore?useSSL=false</value>
</property>
 <!-- jdbc 连接的 Driver-->
 <property>
 <name>javax.jdo.option.ConnectionDriverName</name>
 <value>com.mysql.jdbc.Driver</value>
</property>
<!-- jdbc 连接的 username-->
 <property>
 <name>javax.jdo.option.ConnectionUserName</name>
 <value>mysql的用户</value>
 </property>
 <!-- jdbc 连接的 password -->
 <property>
 <name>javax.jdo.option.ConnectionPassword</name>
 <value>mysql设置的密码</value>
</property>
 <!-- Hive 元数据存储版本的验证 -->
 <property>
 <name>hive.metastore.schema.verification</name>
 <value>false</value>
</property>
 <!--元数据存储授权-->
 <property>
 <name>hive.metastore.event.db.notification.api.auth</name>
 <value>false</value>
 </property>
 <!-- Hive 默认在 HDFS 的工作目录 -->
 <property>
 <name>hive.metastore.warehouse.dir</name>
 <value>/user/hive/warehouse</value>
 </property>
</configuration>

3、登录到MySQL创建数据库metastore

systemctl start mysql
mysql -uroot -p
create database metastore
quit

4、初始化元数据库

schematool -initSchema -dbType mysql -verbose

5 、启动Hadoop集群

$HADOOP_HOME/sbin/start-all.sh

6、启动Hive

bin/hive
show tables;


到这里就结束了,也就成功了,希望小伙们能记住这个问题,也别忘了收藏哦⭐⭐⭐

以上是关于Hive异常:报错:org.apache.hadoop.conf.Configuration.getPassword(Ljava/lang/String;)[C-解决问题同时搭建Hive环境的主要内容,如果未能解决你的问题,请参考以下文章

Hive常见异常处理

Sqoop导出Hive数据到Mysql时异常问题解决

Sqoop导出Hive数据到Mysql时异常问题解决

Sqoop导出Hive数据到Mysql时异常问题解决

修改NameNode端口后,hive表查询报错

hive metastore Server 出现异常