Zeppelin(0.10.1版本)安装及创建hive解释器

Posted EsmeZhao

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Zeppelin(0.10.1版本)安装及创建hive解释器相关的知识,希望对你有一定的参考价值。

 目录

1. Zeppelin安装

2. Zeppelin网页配置连接hive


       利用Zeppelin工具操作hive,需确保电脑已经启动Hadoop集群和hiveserver2服务。

        在master主机上的hive安装目录下启动hiveserver2服务

[root@master hive]#bin/hiveserver2

1. Zeppelin安装

    将压缩包zeppelin-0.10.1-bin-all.tgz上传到master主机的/export/software目录下,并解压到/export/servers/目录下和重命名文件

[root@master ~]#cd /export/software
[root@master software]#rz -be
[root@master software]#tar -zxvf zeppelin-0.10.1-bin-all.tgz -C /export/servers/
[root@master software]#cd /export/servers
[root@master servers]#mv zeppelin-0.10.1-bin-all zeppelin

        将zeppelin/conf下的zeppelin-env.sh.template文件修改为zeppelin-env.sh以及

zeppelin-site.xml.template 文件修改为zeppelin-site.xml,并配置zeppelin-env.sh和

zeppelin-site.xml文件

[root@master servers]# cd /export/servers/zeppelin/conf
[root@master conf]# mv zeppelin-env.sh.template zeppelin-env.sh

zeppelin-env.sh文件配置以下内容:

export JAVA_HOME=/export/servers/jdk

export HADOOP_CONF_DIR=/export/servers/hadoop-3.1.3/etc/hadoop

[root@master conf]# mv zeppelin-site.xml.template zeppelin-site.xml

<property>

       <name>zeppelin.server.addr</name>

       <value>192.168.38.128</value>

       <description>Server address</description>

</property>

<property>

        <name>zeppelin.server.port</name>

        <value>8080</value>

        <description>Server port.</description>

</property>

 启动zeppelin

[root@master conf]# cd ..
[root@master zeppelin]# bin/zeppelin-daemon.sh start

2. Zeppelin网页配置连接hive

 打开Zeppelin网页,http://192.168.38.128:8080/

 添加hive解释器

选中右上角下拉框的“Interpret”选项,跳转到创建页面,选中“create”按钮

 

 配置hive解释器

Interpreter Name:hive

Interpreter group:jdbc

default.driver:org.apache.hive.jdbc.HiveDriver

default.url:jdbc:hive2://192.168.38.128:10000/

default.user:root

default.password:123456 

添加Hive(jdbc)相关jar包


/export/servers/hadoop-3.1.3/share/hadoop/common/hadoop-common-3.1.3.jar 
/export/servers/hive/lib/curator-client-2.12.0.jar (该jar包若不存在,下载上传)
/export/servers/hive/lib/guava-27.0-jre.jar 
/export/servers/hive/lib/hive-jdbc-3.1.2.jar 
/export/servers/hive/lib/hive-common-3.1.2.jar 
/export/servers/hive/lib/hive-serde-3.1.2.jar 
/export/servers/hive/lib/hive-service-3.1.2.jar 
/export/servers/hive/lib/hive-service-rpc-3.1.2.jar 
/export/servers/hive/lib/libthrift-0.9.3.jar 
/export/servers/hive/lib/protobuf-java-2.5.0.jar 
/export/servers/hive/lib/commons-lang-2.6.jar
/export/servers/hive/lib/httpclient-4.5.2.jar
/export/servers/hive/lib/httpcore-4.4.4.jar

 若出现以下错误

 需要在core-site.xml文件中加入以下内容

<property>
    <name>hadoop.proxyuser.root.hosts</name>
    <value>*</value>
</property>
<property>
    <name>hadoop.proxyuser.root.groups</name>
    <value>*</value>
</property>

master主机配置后,将core-site.xml文件分发给slave1和slave2主机,并重新启动集群。

[root@master ~]# cd /export/servers/hadoop-3.1.3/etc/hadoop
[root@master hadoop]# vi core-site.xml
[root@master hadoop]#  core-site.xml
[root@master hadoop]# scp core-site.xml slave1:/export/servers/hadoop-3.1.3/etc/hadoop/
[root@master hadoop]# scp core-site.xml slave2:/export/servers/hadoop-3.1.3/etc/hadoop/

配置完成,点击保存。创建Notebook,解释器为选择为hive。

 测试连接

以上是关于Zeppelin(0.10.1版本)安装及创建hive解释器的主要内容,如果未能解决你的问题,请参考以下文章

在 Zeppelin 中如何使用 Hive

在 Zeppelin 中如何使用 Hive

Apache Zeppelin安装及介绍

AWS EMR:Zeppelin 从 python 2.7 获取 numpy 版本而不是更高版本

在 Apache Zeppelin 上安装 R

Zeppelin 版本 0.7.3 - 连接到 Hive - 错误“找不到解释器 jdbc”