搭建zookeeper管理集群

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了搭建zookeeper管理集群相关的知识,希望对你有一定的参考价值。

Zookeeper集群

 

 

一、实验环境

 

Zookeeper集群环境安装过程详解

 

Zookeeper是一个分布式开源框架提供了协调分布式应用的基本服务它向外部应用暴露一组通用服务——分布式同步Distributed Synchronization命名服务Naming Service集群维护Group Maintenance简化分布式应用协调及其管理的难度提供高性能的分布式服务。ZooKeeper本身可以以单机模式安装运行不过它的长处在于通过分布式ZooKeeper集群一个Leader多个Follower),基于一定的策略来保证ZooKeeper集群的稳定性和可用性从而实现分布式应用的可靠性。

Zookeeper安装和配置

Zookeeper有三种不同的运行环境包括单机环境、集群环境和集群伪分布式环境。

环境准备

技术分享 技术分享

1、修改主机名

 

2、配置/etc/hosts文件

 

#vi /etc/hosts

技术分享 技术分享

安装java jdk-7u65-linux-x64.gz

#tar zxf jdk-7u65-linux-x64.gz
#mv   jdk1.7.0_65/   /usr/local/java

编辑/etc/profile设置java的环境变量

 

#vi /etc/profile

 

export JAVA_HOME=/usr/local/java export PATH=$PATH:$JAVA_HOME/bin #source /etc/profile

 

#ln -s /usr/local/java/bin   /usr/bin
#java -version

技术分享技术分享

二、实验步骤

zk01zk02zk03主机上安装zookeeper

 

1、下载解压zookeeper

 

下载地址 http://www.apache.org/dyn/closer.cgi/zookeeper

 #mkdir /data

#cd/data 

#tar  zxf   zookeeper-3.4.10.tar.gz 

#mv   zookeeper-3.4.10    zookeeper 

2、配置环境变量/etc/profile

#echo "export ZOOKEEPER_HOME=/data/zookeeper" >> /etc/profile

 

#echo "export PATH=$PATH:$ZOOKEEPER_HOME/bin:$ZOOKEEPER_HOME/conf" >> /etc/profile

#source/etc/profile                //使变量生效

 

3、集群部署

Zookeeper集群环境下只要一半以上的机器正常启动了那么Zookeeper服务将是可用的。因此署Zookeeper最好使用奇数台机器这样如果有5台机器只要3台正常工作则服务将正常使用。下面我们将对Zookeeper的配置文件的参数进行设置

 

#cd /data/zookeeper/conf

#cp     zoo_sample.cfg   zoo.cfg

zk01上配置

#vi    zoo.cfg

技术分享技术分享

tickTime: zookeeper中使用的基本时间单位, 毫秒值

 

dataDir: 数据目录. 可以是任意目录.

 

dataLogDir: log目录, 同样可以是任意目录. 如果没有设置该参数, 将使用和dataDir相同的设置. 这里没设置日志目 录。此方法不推荐

 

clientPort: 监听client连接的端口号

 

zk02上执行

 

#scp [email protected]:/data/zookeeper/conf/zoo.cfg/data/zookeeper/conf/

 

zk03上执行

 

#scp[email protected]:/data/zookeeper/conf/zoo.cfg /data/zookeeper/conf/

 

配置文件中server.id=host:port:port中的第一个port是从机器follower连接到主机器leader的端口号第二个port

 

是进行leadership选举的端口号。 接下来在dataDir所指定的目录下创建一个文件名为myid的文件文件中的内容只有一行

 

为本主机对应的id也就是server.id中的id。例如在服务器1中的myid的内容应该写入1 id 被称为Server ID, 用来标识 服务器在集群中的序号。同时每台 ZooKeeper 服务器上, 都需要在数据目录( dataDir 指定的目录) 下创建一个 myid 

 

, 该文件只有一行内容, 即对应于每台服务器的Server ID ZooKeeper 集群中, 每台服务器上的 zoo.cfg 配置文件内容一 致。 server.1  myid 文件内容就是 1。每个服务器的 myid 内容都不同, 且需要保证和自己的 zoo.cfg 配置文件中

server.id=host:port:port id 值一致。

 

id 的范围是 1 ~ 255

 

4.远程复制分发安装文件

 

zk01主机的zookeeper复制到另外两台主机中。 *主机修改datadir目录下myidid 集群模式中, 集群中的每台机器都需要 感知其它机器,  zoo.cfg 配置文件中, 可以按照如下格式进行配置, 每一行代表一台服务器配置。

server.id=host:port:port

 

server.1  myid 文件内容就是 "1"。每个服务器的 myid 内容都不同, 且需要保证和自己的 zoo.cfg 配置文件

 

"server.id=host:port:port"  id 值一致。

 

zk01为例

 

#mkdir  /data/zookeeper/data

 

#cd /data/zookeeper/data

 

#vi myid

 

1

 

zk02上执行

#scp [email protected] :/data/zookeeper/conf/zoo.cfg/data/zookeeper/conf/

zk03上执行

#scp [email protected] :/data/zookeeper/conf/zoo.cfg/data/zookeeper/conf/

5zk01,zk02,zk03启动ZooKeeper

zk01上执行如下操作

#cd       /data/zookeeper/zookeeper/bin

#./zkServer.sh start                                                   //启动zookeeper服务




 

技术分享

在 zk02上执行如下操作

 技术分享

在 zk03上执行如下操作

 技术分享

6、检查zookeeper启动是否成功 

zk01上操作

#jps

技术分享

其中QuorumPeerMainzookeeper进程启动正常。 如上依次启动了所有机器上的Zookeeper之后可以通过ZooKeeper

 

脚本来查看启动状态包括集群中各个结点的角色或是Leader或是Follower),如下所示是在ZooKeeper集群中的每

 

个结点上查询的结果

在 zk01上执行 查看zookeeper状态

技术分享

在 zk02上执行

 技术分享

在 zk03上执行





技术分享

通过上面状态查询结果可见zk02是集群的Leader其余的两个结点是Follower 另外接到ZooKeeper集群上。对于客户

 

端来说ZooKeeper是一个整体ensemble),连接到独享整个集群的服务所以你可以在任何一个结点上建立到服务

 

集群的连接例如

 

7、集群测试

 技术分享 

zookeeper集群搭建完毕!!!


本文出自 “IT大本营” 博客,谢绝转载!

以上是关于搭建zookeeper管理集群的主要内容,如果未能解决你的问题,请参考以下文章

solr集群搭建,zookeeper集群管理

Zookeeper简介与集群搭建

快速搭建zookeeper集群

zookeeper概念 zookeeper常用客户端指令 Curator 事件监听 zookeeper分布式锁 ZooKeeper 集群搭建

zookeeper概念 zookeeper常用客户端指令 Curator 事件监听 zookeeper分布式锁 ZooKeeper 集群搭建

一步一步搭建ZooKeeper + Mesos + Marathon平台管理Docker集群