zookeeper伪分布式集群环境搭建

Posted 2020-09-17 撒_旦

step1、下载

下载地址：http://zookeeper.apache.org/releases.html

将下载的压缩包放到用户家目录下（其他目录也可以）

step2、解压

 

[plain] view plain copy

 

 

1. $tar –zxvf zookeeper-3.4.6.tar.gz  

重命名

[plain] view plain copy

 

 

1. $mv zookeeper-3.4.6 zookeeper  

step3、配置

进入zookeeper/conf/目录下，将改目录下的zoo_sample.cfg配置文件拷贝4份，依次为zoo.cfg  zoo1.cfg  zoo2.cfg  zoo3.cf

使用vim编辑zoo1.cfg  zoo2.cfg zoo3.cfg这三个配置文件

[plain] view plain copy

 

 

1. $ vim zoo1.cfg  

修改内容如下

配置说明

• tickTime：这个时间是作为 Zookeeper 服务器之间或客户端与服务器之间维持心跳的时间间隔，也就是每个 tickTime 时间就会发送一个心跳。
• initLimit：这个配置项是用来配置 Zookeeper 接受客户端（这里所说的客户端不是用户连接 Zookeeper 服务器的客户端，而是 Zookeeper 服务器集群中连接到 Leader 的 Follower 服务器）初始化连接时最长能忍受多少个心跳时间间隔数。当已经超过 10个心跳的时间（也就是 tickTime）长度后 Zookeeper 服务器还没有收到客户端的返回信息，那么表明这个客户端连接失败。总的时间长度就是 10*2000=20 秒
• syncLimit：这个配置项标识 Leader 与 Follower 之间发送消息，请求和应答时间长度，最长不能超过多少个 tickTime 的时间长度，总的时间长度就是 5*2000=10秒
• dataDir：顾名思义就是 Zookeeper 保存数据的目录，默认情况下，Zookeeper 将写数据的日志文件也保存在这个目录里。
• clientPort：这个端口就是客户端连接 Zookeeper 服务器的端口，Zookeeper 会监听这个端口，接受客户端的访问请求。
• server.A=B：C：D：其中 A 是一个数字，表示这个是第几号服务器；B 是这个服务器的 ip 地址；C 表示的是这个服务器与集群中的 Leader 服务器交换信息的端口；D 表示的是万一集群中的 Leader 服务器挂了，需要一个端口来重新进行选举，选出一个新的 Leader，而这个端口就是用来执行选举时服务器相互通信的端口。如果是伪集群的配置方式，由于 B 都是一样，所以不同的 Zookeeper 实例通信端口号不能一样，所以要给它们分配不同的端口号。

使用vim修改zoo2.cfg的dataDir=/home/jianjian/zookeeper/server2/data,clientPort=2182,修改zoo3.cfg的dataDir=/home/jianjian/zookeeper/server3/data,clientPort=2183。dataDir目录开始不存在，需要手动创建，并在各data文件下创建名为myid的文件，文件内容对应服务器编号

[plain] view plain copy

 

 

1. [[email protected] zookeeper]$ echo 1 > server1/data/myid  
2. [[email protected] zookeeper]$ echo 2 > server2/data/myid  
3. [[email protected] zookeeper]$ echo 3 > server3/data/myid  

step4、启动

进入目录/home/Hadoop/zookeeper/bin目录，执行命令：

 

[plain] view plain copy

 

 

1. $zkServer.sh start zoo1.cfg  

启动zoo1.cfg配置的服务，同理依次启动zoo2.cfg和zoo3.cfg所配置的服务

 

step5、查看状态

依次查看启动的三台服务，可见第二台服务为leader，第一台和三台为follower(试验好多次都是第二台是leader，只有一次是第三台是leader,醉~)

附：

当zkServer.sh start和zkServer.sh status命令不接配置文件参数是，默认使用conf/zoo.cfg作为参数

这是只启动一台服务的情况，可见Mode为standalone，只有一台服务的集群...

step6、连通测试

测试server2（leader，其他服务同理）是否连通

[plain] view plain copy

 

 

1. [[email protected] bin]# ./zkCli.sh -server 127.0.0.1:2182  
2. Connecting to 127.0.0.1:2182  
3. 2015-08-12 20:55:23,658 [myid:] - INFO  [main:[email protected]] - Client environment:zookeeper.version=3.4.6-1569965, built on 02/20/2014 09:09 GMT  
4. 2015-08-12 20:55:23,661 [myid:] - INFO  [main:[email protected]] - Client environment:host.name=localhost.localdomain  
5. 2015-08-12 20:55:23,661 [myid:] - INFO  [main:[email protected]] - Client environment:java.version=1.7.0_79  
6. 2015-08-12 20:55:23,662 [myid:] - INFO  [main:[email protected]] - Client environment:java.vendor=Oracle Corporation  
7. 2015-08-12 20:55:23,662 [myid:] - INFO  [main:[email protected]] - Client environment:java.home=/usr/java/jdk1.7.0_79/jre  
8. 2015-08-12 20:55:23,662 [myid:] - INFO  [main:[email protected]] - Client environment:java.class.path=/home/jianjian/zookeeper/bin/../build/classes:/home/jianjian/zookeeper/bin/../build/lib/*.jar:/home/jianjian/zookeeper/bin/../lib/slf4j-log4j12-1.6.1.jar:/home/jianjian/zookeeper/bin/../lib/slf4j-api-1.6.1.jar:/home/jianjian/zookeeper/bin/../lib/netty-3.7.0.Final.jar:/home/jianjian/zookeeper/bin/../lib/log4j-1.2.16.jar:/home/jianjian/zookeeper/bin/../lib/jline-0.9.94.jar:/home/jianjian/zookeeper/bin/../zookeeper-3.4.6.jar:/home/jianjian/zookeeper/bin/../src/java/lib/*.jar:/home/jianjian/zookeeper/bin/../conf:  
9. 2015-08-12 20:55:23,663 [myid:] - INFO  [main:[email protected]] - Client environment:java.library.path=/usr/java/packages/lib/i386:/lib:/usr/lib  
10. 2015-08-12 20:55:23,663 [myid:] - INFO  [main:[email protected]] - Client environment:java.io.tmpdir=/tmp  
11. 2015-08-12 20:55:23,663 [myid:] - INFO  [main:[email protected]] - Client environment:java.compiler=<NA>  
12. 2015-08-12 20:55:23,663 [myid:] - INFO  [main:[email protected]] - Client environment:os.name=Linux  
13. 2015-08-12 20:55:23,663 [myid:] - INFO  [main:[email protected]] - Client environment:os.arch=i386  
14. 2015-08-12 20:55:23,663 [myid:] - INFO  [main:[email protected]] - Client environment:os.version=2.6.18-194.el5  
15. 2015-08-12 20:55:23,663 [myid:] - INFO  [main:[email protected]] - Client environment:user.name=root  
16. 2015-08-12 20:55:23,663 [myid:] - INFO  [main:[email protected]] - Client environment:user.home=/root  
17. 2015-08-12 20:55:23,664 [myid:] - INFO  [main:[email protected]] - Client environment:user.dir=/home/jianjian/zookeeper/bin  
18. 2015-08-12 20:55:23,665 [myid:] - INFO  [main:[email protected]] - Initiating client connection, connectString=127.0.0.1:2182 sessionTimeout=30000 [email protected]  
19. 2015-08-12 20:55:23,699 [myid:] - INFO  [main-SendThread(127.0.0.1:2182):[email protected]] - Opening socket connection to server 127.0.0.1/127.0.0.1:2182. Will not attempt to authenticate using SASL (unknown error)  
20. 2015-08-12 20:55:23,703 [myid:] - INFO  [main-SendThread(127.0.0.1:2182):[email protected]] - Socket connection established to 127.0.0.1/127.0.0.1:2182, initiating session  
21. 2015-08-12 20:55:23,718 [myid:] - INFO  [main-SendThread(127.0.0.1:2182):[email protected]] - Session establishment complete on server 127.0.0.1/127.0.0.1:2182, sessionid = 0x24f21e1b05b0000, negotiated timeout = 30000  
22. Welcome to ZooKeeper!  
23.   
24. WATCHER::  
25.   
26. WatchedEvent state:SyncConnected type:None path:null  
27. JLine support is enabled  
28. [zk: 127.0.0.1:2182(CONNECTED) 0]   

出现以上信息表示连通成功。

附：

看到有些人配置伪集群是将压缩包压缩后拷贝几个副本，每个副本代表一个zookeeper服务，个人觉得没必要，只有拷贝配置文件并修改就行，一个配置文件代表一个zookeeper服务。