zookeeper集群安装

短命女 2022-04-04 21:25 355阅读 0赞

在自己学习或者了解zookeeper基础功能的时候，我们可以搭建一个单机版的zookeeper，这样只需要一台服务器即可完成。

但是在生产环境中，zookeeper基本都是以集群的方式出现的，部署的越多，可靠性就越高。最好是部署奇数（3,5,7…）个，偶数个不是不可以，但是zookeeper集群是以宕机个数过半才会让整个集群宕机的，所以奇数个是性价比最高的。

## 一、环境准备 ##

上面说了，zookeeper集群中的节点数量应当为奇数个，所以这里就选择安装3个节点。

<table> 
 <thead> 
  <tr> 
   <th>软件</th> 
   <th>版本</th> 
  </tr> 
 </thead> 
 <tbody> 
  <tr> 
   <td>jdk</td> 
   <td>1.8.202</td> 
  </tr> 
  <tr> 
   <td>zookeeper</td> 
   <td>3.5.5</td> 
  </tr> 
 </tbody> 
</table>

## 二、安装zookeeper ##

#### 1、安装jdk ####

官网给出的建议是jdk版本最少为1.8，这边下载jdk1.8，下载地址为：[https://www.oracle.com/technetwork/java/javase/downloads/java-archive-javase8-2177648.html][https_www.oracle.com_technetwork_java_javase_downloads_java-archive-javase8-2177648.html]

下载的时候记得点击"Accept License Agreement"，然后下载对应版本的jdk。

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3djMTY5NTA0MDg0Mg_size_16_color_FFFFFF_t_70]

安装jdk很简单，步骤为：解压–>添加环境变量–>使环境变量生效–>验证

[root@localhost ~]# tar -zxf jdk-8u202-linux-x64.tar.gz -C /usr/local/![在这里插入图片描述](https://img-blog.csdnimg.cn/20191216105706248.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3djMTY5NTA0MDg0Mg==,size_16,color_FFFFFF,t_70)
    [root@localhost ~]# vim /etc/profile
    [root@localhost ~]# tail -n 2 /etc/profile
    export JAVA_HOME=/usr/local/jdk1.8.0_202
    export PATH=$PATH:$JAVA_HOME/bin
    [root@localhost ~]# source /etc/profile
    [root@localhost ~]# java -version
    java version "1.8.0_202"
    Java(TM) SE Runtime Environment (build 1.8.0_202-b08)
    Java HotSpot(TM) 64-Bit Server VM (build 25.202-b08, mixed mode)

#### 2、安装zookeeper ####

`3台上都执行下面的操作`

保守起见，我下载的版本是目前最新版本（3.5.6）的前一个版本–3.5.5

下载列表页面：[http://archive.apache.org/dist/zookeeper/zookeeper-3.5.5/][http_archive.apache.org_dist_zookeeper_zookeeper-3.5.5]

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3djMTY5NTA0MDg0Mg_size_16_color_FFFFFF_t_70 1]

这里我就很耿直的踩了一个坑：因为之前我安装过zk的3.4.x版本，所以这里我就毫不犹豫的选择了apache-zookeeper-3.5.5.tar.gz 进行下载，结果就是在我安装完成启动zk的时候报错了：  
`Error: Could not find or load main class org.apache.zookeeper.server.quorum.`

原因是我下载错了zookeeper的二进制文件，在3.5.5之后，zookeeper的二进制文件是apache-zookeeper-3.5.5-bin.tar.gz 。其实在官网中已经提醒我们注意了，具体见官网文件：[https://zookeeper.apache.org/releases.html\#news][https_zookeeper.apache.org_releases.html_news]

![在这里插入图片描述][20191216105757552.png]

解压–>重命名–>添加环境变量–>修改配置文件

[root@node1 local]# tar -zxf apache-zookeeper-3.5.5-bin.tar.gz
    [root@node1 local]# mv apache-zookeeper-3.5.5-bin zookeeper-3.5.5
    [root@node1 local]# vim /etc/profile
    [root@node1 local]# tail -n 2 /etc/profile
    export ZOO_HOME=/usr/local/zookeeper-3.5.5
    export PATH=$PATH:$JAVA_HOME/bin:$ZOO_HOME/bin
    [root@node1 local]# source /etc/profile 
    [root@node1 local]# cd /usr/local/zookeeper-3.5.5/conf/
    [root@node1 conf]# cp zoo_sample.cfg zoo.cfg
    #修改配置文件
    [root@node1 conf]# cat zoo.cfg | grep -Ev '^#|^$'
    tickTime=2000
    initLimit=10
    syncLimit=5
    dataDir=/data/zookeeper
    dataLogDir=/data/zookeeper/log
    clientPort=2181
    maxClientCnxns=60
    autopurge.snapRetainCount=20
    autopurge.purgeInterval=72
    server.1=192.168.0.141:2888:3888
    server.2=192.168.0.142:2888:3888
    server.3=192.168.0.143:2888:3888

创建数据和日志目录

[root@node1 ~]# mkdir -p /data/zookeeper/log

#### 3、zookeeper配置文件详解 ####

`tickTime`：这个是时间单位定量。默认的tickTime=2000表示在zookeeper里面1tickTime表示2000ms，所有其他用到时间的地方都会用多少tickTime来表示。

`initLimit`：这个配置项是用来配置zookeeper接受客户端（这里所说的客户端不是用户连接zookeeper服务器的客户端，而是zookeeper服务器集群中连接到Leader的 Follower服务器）初始化连接时最长能忍受多少个心跳时间间隔数（也就是多少个tickTime），默认是10倍。当已经超过10个心跳的时间长度后zookeeper服务器还没有收到客户端的返回信息，那么表明这个客户端连接失败。总的时间长度就是10\*2000=20秒

`syncLimit`：这个配置项标识Leader与Follower之间发送消息，请求和应答时间长度，最长不能超过多少个tickTime的时间长度，默认是5倍。总的时间长度就是5\*2000=10秒

`dataDir`：顾名思义就是zookeeper保存数据的目录。默认情况下zookeeper将写数据的日志文件也保存在这个目录里。

`dataLogDir`：如果没有提供的话则是dataDir。zookeeper的了持久化都存储在这两个目录里。dataLogDir里是放的顺序日志（WAL）。而dataDir里放的是内存数据结构的snapshot，便于快速恢复。为了达到性能最大化，一般建议把dataDir和dataLogDir分到不同的磁盘上，这样就可以充分利用磁盘顺序写的特性。

`clientPort`：这个端口就是客户端连接zookeeper服务的端口，zookeeper会监听这个端口，接受客户端的访问请求。

`maxClientCnxns`：对于一个客户端的连接数限制，默认值是60。这在大部分时候是足够了，但是在开发和测试环境中，这个值可以设置的大点，因为开发和测试环境往往一台服务器上要跑非常多的应用。

`autopurge.snapRetainCount`，`autopurge.purgeInterval`：客户端在与zookeeper交互过程中会产生非常多的日志，而且zookeeper也会将内存中的数据作为snapshot保存下来，这些数据是不会被自动删除的，这样磁盘中这样的数据就会越来越多。不过可以通过这两个参数来设置，让zookeeper自动删除数据。autopurge.purgeInterval是设置多少小时清理一次，而autopurge.snapRetainCount是设置保留多少个snapshot，之前的则删除。上面配置的意思就是保留72小时内的日志，并且保留20个文件。  
不过如果zookeeper集群是一个非常繁忙的集群，然后又碰上这个删除操作，可能会影响zookeeper集群的性能，所以一般会让这个过程在访问低估的时候进行。但是遗憾的是zookeeper并没有设置在哪个时间点运行删除的设置，多以有时候我们会禁用这个自动删除的功能看，在服务器上写一个定时任务在凌晨来做这件事。

最后添加的`集群配置`：

server.1=192.168.0.11:2888:3888
    server.2=192.168.0.12:2888:3888
    server.3=192.168.0.13:2888:3888

可以看做是server.A=B:C:D  
A是一个数字，是当前server的唯一标识；  
B是这个服务器的IP地址；  
C表示的是这个服务器与集群中的Leader服务器交换信息的端口；  
D表示的是万一集群中的Leader服务器挂了，需要一个端口来重新进行选举，选出一个新的Leader，而这个端口就是用来执行选举时服务器相互通信的端口。

#### 4、配置myid ####

在dataDir目录下面会放置一个myid文件，里面就是一个数字，用来做这个服务的唯一标识。这个id是很重要的，一定要保证它在整个集群中是唯一的。zookeeper会根据这个id来去除server.x上的配置。比如id为1，则对应着zoo.cfg里的server.1的配置。

那根据上面zoo.cfg中的配置，我需要在node1中myid中写入1，在node2的myid中写入2，在node3的myid中写入3。

#node1
    [root@node1 ~]# echo "1" > /data/zookeeper/myid
    #node2
    [root@node2 ~]# echo "2" > /data/zookeeper/myid
    #node3
    [root@node3 ~]# echo "3" > /data/zookeeper/myid

#### 5、修改zookeeper的启动内存大小 ####

根据实际情况，来调整下zookeeper的启动内存大小。

[root@node1 bin]# vim /usr/local/zookeeper-3.5.5/bin/zkServer.sh

添加：`JVMPARAM="-Xms1G -Xmx4G -Xmn2G"`  
![在这里插入图片描述][20191216105821957.png]

并在启动脚本中加入$JVMPARAM  
![在这里插入图片描述][20191216105838293.png]

#### 6、以非root用户运行zookeeper集群 ####

添加zookeeper用户并授权相关目录

[root@node1 ~]# useradd zookeeper
    [root@node1 ~]# chown -R zookeeper:zookeeper /usr/local/zookeeper-3.5.5
    [root@node1 ~]# chown -R zookeeper:zookeeper /data/zookeeper

启动zookeeper，3台最好同时启动，间隔时间不要相差太大。

[root@node1 ~]# su - zookeeper
    [zookeeper@node1 ~]$ zkServer.sh start
    ZooKeeper JMX enabled by default
    Using config: /usr/local/zookeeper-3.5.5/bin/../conf/zoo.cfg
    Starting zookeeper ... STARTED

查看3台zookeeper的状态

#node1
    [zookeeper@node1 ~]$ zkServer.sh status
    ZooKeeper JMX enabled by default
    Using config: /usr/local/zookeeper-3.5.5/bin/../conf/zoo.cfg
    Client port found: 2181. Client address: localhost.
    Mode: follower
    
    #node2
    [zookeeper@node2 ~]$ zkServer.sh status
    ZooKeeper JMX enabled by default
    Using config: /usr/local/zookeeper-3.5.5/bin/../conf/zoo.cfg
    Client port found: 2181. Client address: localhost.
    Mode: leader
    
    #node3
    [zookeeper@node3 ~]$ zkServer.sh status
    ZooKeeper JMX enabled by default
    Using config: /usr/local/zookeeper-3.5.5/bin/../conf/zoo.cfg
    Client port found: 2181. Client address: localhost.
    Mode: follower

可以看到node2上的zookeeper为leader，node1和node3上的为follower。

参考文章：  
https://www.cnblogs.com/cenwei/p/9721167.html  
https://zookeeper.apache.org/doc/r3.5.6/zookeeperOver.html  
https://blog.csdn.net/reblue520/article/details/52311314

[https_www.oracle.com_technetwork_java_javase_downloads_java-archive-javase8-2177648.html]: https://www.oracle.com/technetwork/java/javase/downloads/java-archive-javase8-2177648.html
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3djMTY5NTA0MDg0Mg_size_16_color_FFFFFF_t_70]: /images/20220405/418aecc4f343489e9f064b3885c7f8fc.png
[http_archive.apache.org_dist_zookeeper_zookeeper-3.5.5]: http://archive.apache.org/dist/zookeeper/zookeeper-3.5.5/
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3djMTY5NTA0MDg0Mg_size_16_color_FFFFFF_t_70 1]: /images/20220405/18ace289cd7a49beaf8e42bdebfbaee7.png
[https_zookeeper.apache.org_releases.html_news]: https://zookeeper.apache.org/releases.html#news
[20191216105757552.png]: /images/20220405/3ebdb6c057bb4fc8b8f91265cfea5e67.png
[20191216105821957.png]: /images/20220405/c4983d39d3df4c6e8d5acfeb764b46f2.png
[20191216105838293.png]: /images/20220405/3cc4d0a6891f4af1889e79d780a29faf.png