大数据高可用集群环境安装与配置(05)——安装zookeeper集群
Posted AllEmpty
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了大数据高可用集群环境安装与配置(05)——安装zookeeper集群相关的知识,希望对你有一定的参考价值。
1. 下载安装包
登录官网下载安装包 https://mirrors.tuna.tsinghua.edu.cn/apache/zookeeper/
2. 执行命令下载并安装
cd /usr/local/src/ wget https://mirrors.tuna.tsinghua.edu.cn/apache/zookeeper/zookeeper-3.4.14/zookeeper-3.4.14.tar.gz tar -zxvf zookeeper-3.4.14.tar.gz mv zookeeper-3.4.14 /usr/local/zookeeper cd /usr/local/zookeeper/conf mv zoo_sample.cfg zoo.cfg
3. 修改zoo.cfg配置
vi zoo.cfg
修改下面值
tickTime=6000 initLimit=10 syncLimit=5 # 设置session超时时间,防止hbase由于gc超时原因造成节点服务器离线 minSessionTimeout=15000 maxSessionTimeout=300000 forceSync=no dataDir=/usr/local/zookeeper clientPort=2181 maxClientCnxns=0 autopurge.snapRetainCount=3 autopurge.purgeInterval=1 # 设置zookeeper服务绑定服务器端口 server.1=master:2888:3888 server.2=master-backup:2888:3888
4. 添加myid文件
echo 1 > /usr/local/zookeeper/myid
5. 将zookeeper同步到其他服务器
rsync -avz /usr/local/zookeeper/ master-backup:/usr/local/zookeeper/
将master_backup服务器上myid文件里的值分别修改为2
echo 2 > /usr/local/zookeeper/myid
6. 修改服务器系统环境变量
所有服务器都需要按要求修改配置
vi /etc/profile
在尾部添加下面配置
export ZK_HOME=/usr/local/zookeeper/
export PATH=$PATH:$ZK_HOME/bin
保存退出后,运行命令,让配置马上生效
source /etc/profile
7. 设置日志记录级别
vi /usr/local/zookeeper/conf/log4j.properties
将zookeeper.console.threshold=INFO修改为zookeeper.console.threshold=WARN,减少日志记录
8. 启动zookeeper服务
在所有服务器上运行
/usr/local/zookeeper/bin/zkServer.sh start
检查服务状态,一个为leader,一个follower
/usr/local/zookeeper/bin/zkServer.sh status
访问zookeeper服务
/usr/local/zookeeper/bin/zkCli.sh -server master:2181
查看zookeeper内容
ls /
退出服务
quit
9. 异常检查
如果zookeeper一直没有启动成功,可以通过查看日志的错误信息查找原因
由于zookeeper是使用nohup启动了,会在当前执行启动命令所在的路径下创建日志文件,所以日志文件所在的地址是不固定的,需要使用find命令查找
find / -name zookeeper.out
找到多个日志文件
/usr/local/zookeeper/zookeeper.out /data/logs/zookeeper.out /root/zookeeper.out
使用ll命令查看日志文件最后修改时间,看看那个是当前正在写入的日志文件
ll /usr/local/zookeeper/zookeeper.out -rw-r--r--. 1 root root 39712827 Jun 9 11:03 /usr/local/zookeeper/zookeeper.out
使用tail命令查看日志信息
tail -f /usr/local/zookeeper/zookeeper.out
版权声明:本文原创发表于 博客园,作者为 AllEmpty 本文欢迎转载,但未经作者同意必须保留此段声明,且在文章页面明显位置给出原文连接,否则视为侵权。
作者博客:http://www.cnblogs.com/EmptyFS/
以上是关于大数据高可用集群环境安装与配置(05)——安装zookeeper集群的主要内容,如果未能解决你的问题,请参考以下文章
大数据高可用集群环境安装与配置(06)——安装Hadoop高可用集群
大数据高可用集群环境安装与配置(07)——安装HBase高可用集群
大数据高可用集群环境安装与配置(09)——安装Spark高可用集群
大数据高可用集群环境安装与配置(08)——安装Ganglia监控集群