HBASE的安装过程及运行HBASE程序的需要配置的内容

Posted xsg-960923

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了HBASE的安装过程及运行HBASE程序的需要配置的内容相关的知识,希望对你有一定的参考价值。

HBase安装配置

①下载压缩包(选择与自己安装的Hadoop版本的兼容版本,见后面附录)

官网下载地址:https://mirrors.tuna.tsinghua.edu.cn/apache/hbase/stable/

选择稳定版hbase-1.4.9-bin.tar.gz,在Windows里面下载。

②将压缩包从Windows传输到Linux当前目录下

SecureCRT 【File】→【Connect SFTP Session】开启sftp操作

 技术图片

③安装

解压安装到指定目录下/opt/module(/opt是系统自带目录,之下的/module是自己创建的)

 技术图片

④配置环境变量

在/etc/profile文件里添加HBase安装路径的配置信息,之后用source命令使配置生效。安装之后的目录为hbase-1.4.9,修改为hbase,所以我的HBase安装路径是/opt/module/hbase。

 技术图片

测试HBase安装成功,命令hbase version,或hbase。

 技术图片

HBase配置(伪分布式模式)

配置文件位于HBase安装路径的conf目录(/opt/module/hbase/conf)下面

①配置hbase-env.sh

设置Java安装路径

 技术图片

设置HBase的配置文件路径(/opt/module/hbase/conf)

技术图片

采用HBase自带Zookeeper,设置参数true

 技术图片

②配置hbase-site.xml

<!--hbase共享目录,持久化hbase数据-->

<!--配置为core-site.xml 中的fs.defaultFS -->

<property>

        <name>hbase.rootdir</name>

        <value>hdfs://bigdata128:9000/hbase</value>

</property>

<!--分布式运行模式,false(默认)为单机模式-->

<property>

        <name>hbase.cluster.distributed</name>

        <value>true</value>

</property>

<!--Zookeeper集群的地址列表,伪分布式用默认localhost-->

<property>

        <name>hbase.zookeeper.quorum</name>

        <value>localhost</value>

</property>

③启动并运行HBase(之前启动Hadoop)

启动HBase,并jps查看

 技术图片

技术图片

用完停止HBase运行(之后停止Hadoop)

 技术图片

start-all.sh

start-hbase.sh

进入HBase数据库

进入HBase的shell命令行模式

 技术图片

了解命令使用方法,如创建表,输入help ‘create’

①   创建表

 技术图片

②   添加数据

 技术图片

③   查看数据

 技术图片

 技术图片

④删除数据

删除一个单元格

技术图片

删除一行

 技术图片

④   删除表

 技术图片

 

HBase架构原理

https://www.cnblogs.com/steven-note/p/7209398.html

Hbase Java API

https://www.cnblogs.com/liuwei6/p/6842536.html

https://www.cnblogs.com/tiantianbyconan/p/3557571.html

参考资料:

Linux下配置环境变量最常用的两种方法—— .bashrc 和 /etc/profile

https://blog.csdn.net/sun8112133/article/details/79901527

学习 HBase,应该选择哪个版本?

https://blog.csdn.net/tzhuwb/article/details/81153323

https://www.csdn.net/gather_2a/MtTaEgzsODU5Mi1ibG9n.html

 技术图片

WARN  [main] zookeeper.ZooKeeperNodeTracker: Can‘t get or delete the master znode

Will not attempt to authenticate using SASL (unknown error)

建表之后查看logs报错

ERROR [main] client.ConnectionManager$HConnectionImplementation: Can‘t get connection to ZooKeeper: KeeperErrorCode = ConnectionLoss for /hbase

建表时报错

Can‘t get connection to ZooKeeper: KeeperErrorCode = ConnectionLoss for /hbase

重新停止、启动HBASE,查看logs,报错2019-04-04 10:41:52,238 INFO  [M:0;bigdata128:35321-SendThread(localhost:2181)] zookeeper.ClientCnxn: Opening socket connection to server localhost/127.0.0.1:2181. Will not attempt to authenticate using SASL (unknown error)

Hbase shell 运行status

报错2019-04-04 10:49:55,710 ERROR [main] client.ConnectionManager$HConnectionImplementation: Can‘t get connection to ZooKeeper: KeeperErrorCode = ConnectionLoss for /hbase

 技术图片

启动hbase,报错:

ERROR [main] server.ZooKeeperServer: ZKShutdownHandler is not registered

ERROR [main] master.HMasterCommandLine: Master exiting

java.io.IOException: Could not start ZK at requested port of 2181.  ZK was started at port: 2182.  Aborting as clients (e.g. shell) will not be able to find this ZK quorum.

关闭防火墙service iptables stop

 

HBase安装配置

解压及安装

将压缩包从Windows传输到Linux当前目录下:

 技术图片

技术图片

解压安装到指定目录下/opt/module

 技术图片

技术图片

配置环境变量

在/etc/profile文件里添加HBase及zookeeper安装路径的配置信息

 技术图片

测试HBase安装成功,命令hbase version,或hbase

技术图片

修改配置信息

修改slaves里的内容,改成虚拟机的主机名

 技术图片

技术图片

把zoo_sample.cfd文件名称改为zoo.cfg,

技术图片 

HBase配置(伪分布式模式)

配置文件位于HBase安装路径的conf目录

配置hbase-env.sh,设置Java,HBase,zookeeper安装路径

 技术图片

配置hbase-site.xml   注:bigdata128,localhost改成虚拟机的主机名

<!--hbase共享目录,持久化hbase数据-->

<!--配置为core-site.xml 中的fs.defaultFS -->

<property>

        <name>hbase.rootdir</name>

        <value>hdfs://bigdata128:9000/hbase</value>

</property>

<!--分布式运行模式,false(默认)为单机模式-->

<property>

        <name>hbase.cluster.distributed</name>

        <value>true</value>

</property>

 

<!--Zookeeper集群的地址列表,伪分布式用默认localhost-->

<property>

        <name>hbase.zookeeper.quorum</name>

        <value>localhost</value>

</property>

修改eclipse的内容

在【Properties】 里的【Java Build Path】 中【Libraries】添加【hbase-1.4.9】中【lib】的除了【slf4j-log4j12-1.7.10.jar】其它所有jar文件都要添加;并添加【conf】文件夹,把【hbase-1.4.9】中【conf】的【hbase-site.xml】添加到【conf】文件夹里。

 技术图片技术图片

技术图片技术图片

技术图片

修改添加的【hbase-site.xml】文件注:bigdata128,localhost改成虚拟机的主机名

<!--hbase共享目录,持久化hbase数据-->

<!--配置为core-site.xml 中的fs.defaultFS -->

<property>

        <name>hbase.rootdir</name>

        <value>hdfs://bigdata128:9000/hbase</value>

</property>

<!--分布式运行模式,false(默认)为单机模式-->

<property>

        <name>hbase.cluster.distributed</name>

        <value>true</value>

</property>

<!--Zookeeper集群的地址列表,伪分布式用默认localhost-->

<property>

        <name>hbase.zookeeper.quorum</name>

        <value>localhost</value>

</property>

运行程序时,先在CRT上启动hadoop、hbase、Zookeeper,并jps查看

start-all.sh

start-hbase.sh

zkServer.sh start

 技术图片

 

 

 

技术图片

以上是关于HBASE的安装过程及运行HBASE程序的需要配置的内容的主要内容,如果未能解决你的问题,请参考以下文章

Hbase运行不稳定,通过修改系统配置(THP)解决Hbase运行过程中时常出现宕机的问题

Hbase运行不稳定,通过修改系统配置(THP)解决Hbase运行过程中时常出现宕机的问题

HBase安装配置

HBase安装配置

Hbase集群搭建及所有配置调优参数整理及API代码运行

idea中配置环境Spark3.0操作Hbase1.3.6