zookeeper的部署

港控/mmm° 2022-05-14 07:14 319阅读 0赞

# 一、zookeeper介绍 #

zookeeper是一个分布式的开源框架，它能很好的管理集群，而且提供协调分布式应用的基本服务。

它向外部应用暴露一组通用服务——分布式同步（Distributed Synchronization）、命名服务（Naming Service）、集群维护（Group Maintenance）等，简化分布式应用协调及其管理的难度，提供高性能的分布式服务。

zookeeper本身可以以standalone模式（单节点状态）安装运行，不过它的长处在于通过分布式zookeeper集群（一个leader，多个follower），基于一定的策略来保证zookeeper集群的稳定性和可用性，从而实现分布式应用的可靠性。

## 1.1、zookeeper集群角色介绍 ##

zookeeper集群中主要有两个角色：leader和follower。

领导者（leader）,用于负责进行投票的发起和决议,更新系统状态。

学习者（learner）,包括跟随者（follower）和观察者（observer）。

其中follower用于接受客户端请求并想客户端返回结果,在选主过程中参与投票。

而observer可以接受客户端连接,将写请求转发给leader,但observer不参加投票过程,只同步leader的状态,observer的目的是为了扩展系统,提高读取速度。

## 1.2 zookeeper集群节点个数 ##

一个zookeeper集群需要运行几个zookeeper节点呢？

你可以运行一个zookeeper节点，但那就不是集群了。如果要运行zookeeper集群的话，最好部署3，5，7个zookeeper节点。本次实验我们是以3个节点进行的。

zookeeper节点部署的越多，服务的可靠性也就越高。当然建议最好是部署奇数个，偶数个不是不可以。但是zookeeper集群是以宕机个数过半才会让整个集群宕机的，所以奇数个集群更佳，例如如果有两台zookeeper那么如果挂了一台那么整个集群将无法运行，因为已经挂了一半了。

你需要给每个zookeeper 1G左右的内存，如果可能的话，最好有独立的磁盘，因为独立磁盘可以确保zookeeper是高性能的。如果你的集群负载很重，不要把zookeeper和RegionServer运行在同一台机器上面，就像DataNodes和TaskTrackers一样。

本次实验三台centos7 linux服务器作为演示

首先是要装好jdk

我这边装的是jdk1.7.0\_80 (三台都需要安装)

安装jdk1.7，使用如下命令：

wget [http://mirrors.linuxeye.com/jdk/jdk-7u80-linux-x64.tar.gz][http_mirrors.linuxeye.com_jdk_jdk-7u80-linux-x64.tar.gz] && tar -xf jdk-7u80-linux-x64.tar.gz -C /usr/local/ && chown root:root -R /usr/local/jdk1.7.0\_80/

把jdk加入到环境变量，使用如下命令：

cat >> /etc/profile << “EOF”

export JAVA\_HOME=/usr/local/jdk1.7.0\_80

export CLASSPATH=.:$JAVA\_HOME/lib/dt.jar:$JAVA\_HOME/lib/tools.jar

export PATH=$PATH:$JAVA\_HOME/bin

EOF

使用source命令加载最新的环境变量

source /etc/profile

通过java -version查看是否装好java

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzIyNTQzOTkx_size_27_color_FFFFFF_t_70][]

因为zookeeper是分布安装在三台服务器上，所以三台时间需要同步，会导致集群无法正常提供服务

ps：遇到zookeeper集群，我们首先需要保证三台服务器的基础环境是一致的

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzIyNTQzOTkx_size_27_color_FFFFFF_t_70 1][]

selinux 以及防火墙也会影响集群，如果想打开防火墙也可以将对应的端口打开放行

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzIyNTQzOTkx_size_27_color_FFFFFF_t_70 2][]

### 2.2 安装zookeeper ###

zookeeper的安装很简单，我们只需要下载zookeeper压缩包，然后解压、配置、执行就可以了。如下：

[wget https://mirrors.cnnic.cn/apache/zookeeper/zookeeper-3.4.10/zookeeper-3.4.10.tar.gz][wget https_mirrors.cnnic.cn_apache_zookeeper_zookeeper-3.4.10_zookeeper-3.4.10.tar.gz]

tar -C /usr/local/ -xf zookeeper-3.4.10.tar.gz

mv zookeeper-3.4.8 zookeeper

chown root:root -R zookeeper/

cd zookeeper

cp conf/zoo\_sample.cfg conf/zoo.cfg

把zookeeper加入到环境变量，如下：

vim /etc/profile

export PATH=$PATH:/usr/local/zookeeper/bin

执行source命令使刚刚修改的环境生效，如下：

source /etc/profile

env|grep PATH

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzIyNTQzOTkx_size_27_color_FFFFFF_t_70 3][]

现在我们在其中任意一台服务器上启动zookeeper，使用如下命令：

bin/zkServer.sh start

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzIyNTQzOTkx_size_27_color_FFFFFF_t_70 4][]

查看zookeeper端口、状态和zookeeper日志，如下：

netstat -tunlp

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzIyNTQzOTkx_size_27_color_FFFFFF_t_70 5][]

cat zookeeper.out (日志)

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzIyNTQzOTkx_size_27_color_FFFFFF_t_70 6][]

目前只配置了一台后面我们来搭建集群

### 三、zookeeper集群搭建 ###

zookeeper搭建完毕后，我们现在来配置zookeeper集群。

注意：在搭建zookeeper集群时，一定要停止已经启动的zookeeper。

3.1 修改zookeeper配置文件

zookeeper集群的搭建很简单，我们只需要修改每台服务器的zoo.cfg配置文件然后进行相关的操作即可。

先来修改zookeeper的配置文件zoo.cfg，如下：

tickTime=2000

initLimit=10

syncLimit=5

dataDir=/usr/local/zookeeper/data

dataLogDir=/usr/local/zookeeper/logs

clientPort=2181

server.3=10.1.31.11:2888:3888

server.1=10.1.31.12:2888:3888

server.2=10.1.31.26:2888:3888

![clipboard-21.png][]

配置文件参数说明:

tickTime这个时间是作为zookeeper服务器之间或客户端与服务器之间维持心跳的时间间隔,也就是说每个tickTime时间就会发送一个心跳。

initLimit这个配置项是用来配置zookeeper接受客户端（这里所说的客户端不是用户连接zookeeper服务器的客户端,而是zookeeper服务器集群中连接到leader的follower 服务器）初始化连接时最长能忍受多少个心跳时间间隔数。

当已经超过10个心跳的时间（也就是tickTime）长度后 zookeeper 服务器还没有收到客户端的返回信息,那么表明这个客户端连接失败。总的时间长度就是 10\*2000=20秒。

syncLimit这个配置项标识leader与follower之间发送消息,请求和应答时间长度,最长不能超过多少个tickTime的时间长度,总的时间长度就是5\*2000=10秒。

dataDir顾名思义就是zookeeper保存数据的目录,默认情况下zookeeper将写数据的日志文件也保存在这个目录里；

clientPort这个端口就是客户端连接Zookeeper服务器的端口,Zookeeper会监听这个端口接受客户端的访问请求；

server.A=B:C:D中的A是一个数字,表示这个是第几号服务器,B是这个服务器的IP地址，C第一个端口用来集群成员的信息交换,表示这个服务器与集群中的leader服务器交换信息的端口，D是在leader挂掉时专门用来进行选举leader所用的端口。

3.2 创建相关目录

配置文件修改完毕后，我们来创建zookeeper数据目录和日志目录，使用如下命令：

mkdir -p /usr/local/zookeeper/logs

mkdir -p /usr/local/zookeeper/data

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzIyNTQzOTkx_size_27_color_FFFFFF_t_70 7][]

目录结构：

![clipboard-22.png][]

3.3 创建ServerID标识

除了修改zoo.cfg配置文件外,zookeeper集群模式下还要配置一个myid文件,这个文件需要放在dataDir目录下。

这个文件里面有一个数据就是A的值（该A就是zoo.cfg文件中server.A=B:C:D中的A）,在zoo.cfg文件中配置的dataDir路径中创建myid文件。

10.1.31.12

echo “1” > /usr/local/zookeeper/data/myid

10.1.31.26

echo “2”> /usr/local/zookeeper/data/myid

10.1.31.11

echo “3”> /usr/local/zookeeper/data/myid

四、查看zookeeper集群

经过第三章节配置，在每台服务器上都操作完毕后，我们现在来启动每台服务器上的zookeeper。如下：

cd /usr/local/zookeeper

bin/zkServer.sh start （PS：启动的时候一定要在当前目录启动，因为zookeeper.out这个文件会在你当前启动zookeeper的目录启动）

zookeeper启动完毕后，我们来查看各个服务器上zookeeper的状态。如下：

bin/zkServer.sh status

![clipboard-23.png][]  ![clipboard1-5.png][]![clipboard2-1.png][]![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzIyNTQzOTkx_size_27_color_FFFFFF_t_70 8][]

2个为follower 一个为leader 集群正常

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzIyNTQzOTkx_size_27_color_FFFFFF_t_70 9][]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzIyNTQzOTkx_size_27_color_FFFFFF_t_70 10][]

五、连接zookeeper集群

zookeeper集群搭建完毕后，我们可以通过客户端脚本，连接到zookeeper集群上。

对于客户端来说，zookeeper集群是一个整体，连接到zookeeper集群实际上感觉在独享整个集群的服务，所以，你可以在任何一个结点上建立到服务集群的连接，例如：

bin/zkCli.sh -server 10.1.31.12:2181

通过上图，我们可以很明显的看出在192.168.1.124这台机器上连接192.168.1.9服务器上的zookeeper是正常的，而且当前根路径为/zookeeper。

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzIyNTQzOTkx_size_27_color_FFFFFF_t_70 11][]

这里是我配置了activemq集群才会这样，一般情况如果刚装好zookeepr是只有一个，如果装了其他服务依赖zookeeper那么就会多出来服务名

[http_mirrors.linuxeye.com_jdk_jdk-7u80-linux-x64.tar.gz]: http://mirrors.linuxeye.com/jdk/jdk-7u80-linux-x64.tar.gz
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzIyNTQzOTkx_size_27_color_FFFFFF_t_70]: /images/20220514/b4b06988da4b491a95ccd1e2f92c36f9.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzIyNTQzOTkx_size_27_color_FFFFFF_t_70 1]: /images/20220514/c1b507a10ff94d4abc63124f93d6ce29.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzIyNTQzOTkx_size_27_color_FFFFFF_t_70 2]: /images/20220514/b876eff4bfde4f2ba4df323c4731c4b8.png
[wget https_mirrors.cnnic.cn_apache_zookeeper_zookeeper-3.4.10_zookeeper-3.4.10.tar.gz]: http://www.yingjianjian.com/interm
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzIyNTQzOTkx_size_27_color_FFFFFF_t_70 3]: /images/20220514/0e2a73a8533e4e90a2a7b86d0da7f4af.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzIyNTQzOTkx_size_27_color_FFFFFF_t_70 4]: /images/20220514/32d64caa598141aaa95d482357c00a68.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzIyNTQzOTkx_size_27_color_FFFFFF_t_70 5]: /images/20220514/1263a8748014404c861218e91f3b9706.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzIyNTQzOTkx_size_27_color_FFFFFF_t_70 6]: /images/20220514/33b8ebfc847d47e882dcc812fa03dc44.png
[clipboard-21.png]: http://www.yingjianjian.com/wp-content/uploads/2017/11/clipboard-21.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzIyNTQzOTkx_size_27_color_FFFFFF_t_70 7]: /images/20220514/d757df52d52d4a9ab0475bb2a53bcc74.png
[clipboard-22.png]: http://www.yingjianjian.com/wp-content/uploads/2017/11/clipboard-22.png
[clipboard-23.png]: http://www.yingjianjian.com/wp-content/uploads/2017/11/clipboard-23.png
[clipboard1-5.png]: http://www.yingjianjian.com/wp-content/uploads/2017/11/clipboard1-5.png
[clipboard2-1.png]: http://www.yingjianjian.com/wp-content/uploads/2017/11/clipboard2-1.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzIyNTQzOTkx_size_27_color_FFFFFF_t_70 8]: /images/20220514/8ce434e00ab3475e9571cf5eae4cfe00.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzIyNTQzOTkx_size_27_color_FFFFFF_t_70 9]: /images/20220514/0a27781e0a974e4d82bc256101bdb735.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzIyNTQzOTkx_size_27_color_FFFFFF_t_70 10]: /images/20220514/7ae9cf95370943a499c0763dda5ffca2.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzIyNTQzOTkx_size_27_color_FFFFFF_t_70 11]: /images/20220514/fae9cc10be2d49d789c28a6bdffdf521.png