大数据高可用集群环境安装与配置(05)——安装zookeeper集群

Posted AllEmpty

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了大数据高可用集群环境安装与配置(05)——安装zookeeper集群相关的知识,希望对你有一定的参考价值。

1. 下载安装包

登录官网下载安装包 https://mirrors.tuna.tsinghua.edu.cn/apache/zookeeper/

2. 执行命令下载并安装

cd /usr/local/src/
wget https://mirrors.tuna.tsinghua.edu.cn/apache/zookeeper/zookeeper-3.4.14/zookeeper-3.4.14.tar.gz
tar -zxvf zookeeper-3.4.14.tar.gz
mv zookeeper-3.4.14 /usr/local/zookeeper
cd /usr/local/zookeeper/conf
mv zoo_sample.cfg zoo.cfg

 

3. 修改zoo.cfg配置

vi zoo.cfg

修改下面值

 

tickTime=6000
initLimit=10
syncLimit=5
# 设置session超时时间,防止hbase由于gc超时原因造成节点服务器离线
minSessionTimeout=15000
maxSessionTimeout=300000
forceSync=no
dataDir=/usr/local/zookeeper
clientPort=2181
maxClientCnxns=0
autopurge.snapRetainCount=3
autopurge.purgeInterval=1
# 设置zookeeper服务绑定服务器端口
server.1=master:2888:3888
server.2=master-backup:2888:3888

 

4. 添加myid文件

echo 1 > /usr/local/zookeeper/myid

 

5. 将zookeeper同步到其他服务器

rsync -avz /usr/local/zookeeper/ master-backup:/usr/local/zookeeper/

将master_backup服务器上myid文件里的值分别修改为2

echo 2 > /usr/local/zookeeper/myid

 

6. 修改服务器系统环境变量

所有服务器都需要按要求修改配置

vi /etc/profile

在尾部添加下面配置

export ZK_HOME=/usr/local/zookeeper/
export PATH=$PATH:$ZK_HOME/bin

保存退出后,运行命令,让配置马上生效

source /etc/profile

 

7. 设置日志记录级别

vi /usr/local/zookeeper/conf/log4j.properties

将zookeeper.console.threshold=INFO修改为zookeeper.console.threshold=WARN,减少日志记录

 

8. 启动zookeeper服务

在所有服务器上运行

/usr/local/zookeeper/bin/zkServer.sh start

检查服务状态,一个为leader,一个follower

/usr/local/zookeeper/bin/zkServer.sh status

访问zookeeper服务

/usr/local/zookeeper/bin/zkCli.sh -server master:2181

查看zookeeper内容

ls /

退出服务

quit

 

9. 异常检查

如果zookeeper一直没有启动成功,可以通过查看日志的错误信息查找原因

由于zookeeper是使用nohup启动了,会在当前执行启动命令所在的路径下创建日志文件,所以日志文件所在的地址是不固定的,需要使用find命令查找

find / -name zookeeper.out

找到多个日志文件

/usr/local/zookeeper/zookeeper.out
/data/logs/zookeeper.out
/root/zookeeper.out

使用ll命令查看日志文件最后修改时间,看看那个是当前正在写入的日志文件

ll /usr/local/zookeeper/zookeeper.out

-rw-r--r--. 1 root root 39712827 Jun  9 11:03 /usr/local/zookeeper/zookeeper.out

使用tail命令查看日志信息

tail -f /usr/local/zookeeper/zookeeper.out

 

版权声明:本文原创发表于 博客园,作者为 AllEmpty 本文欢迎转载,但未经作者同意必须保留此段声明,且在文章页面明显位置给出原文连接,否则视为侵权。

作者博客:http://www.cnblogs.com/EmptyFS/

以上是关于大数据高可用集群环境安装与配置(05)——安装zookeeper集群的主要内容,如果未能解决你的问题,请参考以下文章

大数据高可用集群环境安装与配置(06)——安装Hadoop高可用集群

大数据高可用集群环境安装与配置(07)——安装HBase高可用集群

大数据高可用集群环境安装与配置(09)——安装Spark高可用集群

大数据高可用集群环境安装与配置(08)——安装Ganglia监控集群

大数据高可用集群环境安装与配置(04)——安装JAVA运行环境

大数据高可用集群环境安装与配置(02)——配置ntp服务