hadoop生态搭建（3节点）-03.zookeeper配置

Posted 2021-01-11 zcf5522

# https://www.oracle.com/technetwork/java/javase/downloads/java-archive-javase8-2177648.html

# ==================================================================安装 jdk

mkdir -p /usr/java
tar -zxvf ~/jdk-8u111-linux-x64.tar.gz -C /usr/java
rm -r ~/jdk-8u111-linux-x64.tar.gz

 # http://archive.apache.org/dist/zookeeper/

# ==================================================================安装 zookeeper
# zookeeper集群搭建要至少3台服务器，服务器都要部署zookeeper

tar -zxvf ~/zookeeper-3.4.12.tar.gz -C /usr/local
rm -r ~/zookeeper-3.4.12.tar.gz

 # 配置环境变量

# ==================================================================node1 node2 node3

vi /etc/profile

# 在export PATH USER LOGNAME MAIL HOSTNAME HISTSIZE HISTCONTROL下添加
export JAVA_HOME=/usr/java/jdk1.8.0_111
export ZOOKEEPER_HOME=/usr/local/zookeeper-3.4.12

export PATH=$PATH:$JAVA_HOME/bin:$JAVA_HOME/jre/bin:$ZOOKEEPER_HOME/bin
export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar

 # ==================================================================node1

# 使环境变量生效
source /etc/profile


# 检查是否配置成功
java -version


# 查看配置结果
echo $JAVA_HOME

echo $ZOOKEEPER_HOME


# 创建数据文件和日志存放目录
mkdir $ZOOKEEPER_HOME/{data,logs}


cp $ZOOKEEPER_HOME/conf/zoo_sample.cfg $ZOOKEEPER_HOME/conf/zoo.cfg
vi $ZOOKEEPER_HOME/conf/zoo.cfg

dataDir=/usr/local/zookeeper-3.4.12/data
dataLogDir=/usr/local/zookeeper-3.4.12/logs
clientPort=2181
autopurge.snapRetainCount=3
autopurge.purgeInterval=1
server.1=node1:2888:3888
server.2=node2:2888:3888
server.3=node3:2888:3888


vi $ZOOKEEPER_HOME/conf/log4j.properties

zookeeper.log.dir=/usr/local/zookeeper-3.4.12/logs
zookeeper.tracelog.dir=/usr/local/zookeeper-3.4.12/logs

 # ==================================================================node2 node3

mkdir -p /usr/java

  # 同步到其他节点

# ==================================================================node1

scp -r $JAVA_HOME node2:/usr/java/
scp -r $JAVA_HOME node3:/usr/java/

scp -r $ZOOKEEPER_HOME node2:/usr/local/
scp -r $ZOOKEEPER_HOME node3:/usr/local/

 # ==================================================================node2 node3

# 使环境变量生效
source /etc/profile


# 检查是否配置成功
java -version


# 查看配置结果
echo $JAVA_HOME
echo $ZOOKEEPER_HOME

 # 在zookeeper的data目录下分别编辑myid

# ==================================================================node1

echo "1" > $ZOOKEEPER_HOME/data/myid

# 查看myid
cat $ZOOKEEPER_HOME/data/myid

 # ==================================================================node2

echo "2" > $ZOOKEEPER_HOME/data/myid

# ==================================================================node3

echo "3" > $ZOOKEEPER_HOME/data/myid

 # 启动

# ==================================================================node1 node2 node3

zkServer.sh start
zkServer.sh status

# zkServer.sh stop
# $ZOOKEEPER_HOME/bin/zkServer.sh start
# $ZOOKEEPER_HOME/bin/zkServer.sh status
# $ZOOKEEPER_HOME/bin/zkServer.sh stop


shutdown -h now

# 快照 zookeeper

  

 

# 先不用配置kafka SASL认证配置，待kafka配置好后再进行

# ==================================================================kafka SASL认证配置
vi $ZOOKEEPER_HOME/conf/zoo.cfg

authProvider.1=org.apache.zookeeper.server.auth.SASLAuthenticationProvider
requireClientAuthScheme=sasl
jaasLoginRenew=3600000

 

# ==================================================================参考
# cat $ZOOKEEPER_HOME/conf/zoo.cfg

# tickTime：CS通信心跳数
# Zookeeper 服务器之间或客户端与服务器之间维持心跳的时间间隔，也就是每个 tickTime 时间就会发送一个心跳。tickTime以毫秒为单位
tickTime=2000

# initLimit：LF初始通信时限
# 集群中的follower服务器(F)与leader服务器(L)之间初始连接时能容忍的最多心跳数（tickTime的数量）
initLimit=5

# syncLimit：LF同步通信时限
# 集群中的follower服务器与leader服务器之间请求和应答之间能容忍的最多心跳数（tickTime的数量）
syncLimit=2

# dataDir：数据文件目录
# Zookeeper保存数据的目录，默认情况下，Zookeeper将写数据的日志文件也保存在这个目录里
dataDir=/usr/local/zookeeper-3.4.12/data

# dataLogDir：日志文件目录
# Zookeeper保存日志文件的目录
dataLogDir=/usr/local/zookeeper-3.4.12/logs

# clientPort：客户端连接端口
# 客户端连接 Zookeeper 服务器的端口，Zookeeper 会监听这个端口，接受客户端的访问请求
clientPort=2181

# 数据文件保存最近的3个快照，默认是都保存，时间长的话会占用很大磁盘空间
autopurge.snapRetainCount=3

# 单位为小时，每小时清理一次快照数据
autopurge.purgeInterval=1

# server.N 服务器名称与地址
# 从N开始依次为：服务编号、服务地址、LF通信端口、选举端口
server.1=node1:2888:3888
server.2=node2:2888:3888
server.3=node3:2888:3888