zookeeper集群服务搭建

雨点打透心脏的1/2处 2022-06-09 14:46 354阅读 0赞

zookeeper集群服务搭建

ZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,是Google的Chubby一个开源的实现,是Hadoop和Hbase的重要组件。它是一个为分布式应用提供一致性服务的软件,提供的功能包括:配置维护、域名服务、分布式同步、组服务等。

ZooKeeper的目标就是封装好复杂易出错的关键服务,将简单易用的接口和性能高效、功能稳定的系统提供给用户。

ZooKeeper包含一个简单的原语集,提供Java和C的接口。

ZooKeeper代码版本中,提供了分布式独享锁、选举、队列的接口,代码在zookeeper-3.4.3\src\recipes。其中分布锁和队列有Java和C两个版本,选举只有Java版本。今天我们在linux上来搭建一个zookeeper集群服务。

一、所需要工具

虚拟机VMware Workstation Pro、rhel-server-6.5-x86_64-dvd.iso (redhat)红帽镜像、linux版本jdk、zookeeper-3.4.9.tar.gz

jdk官网下载地址是( http://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html)

zookeeper官网下载地址是:( http://mirror.bit.edu.cn/apache/zookeeper/zookeeper-3.4.9/)

之所以采用虚拟机,是个人搭建学习的时候没有太多机器来模拟,而且搭建的时候我们选择3台来集群,所以新建了三台虚拟机。

二、安装zookeeper(虚拟机系统的安装和jdk安装就省略了)

(1)虚拟机安装

20170907213212526

(2)启动虚拟机,ifconfig查询ip地址,并用xshell操作虚拟机

20170907213926370

虚拟机129IP地址是:192.168.164.129

虚拟机130IP地址是:192.168.164.130

虚拟机131IP地址是:192.168.164.131

(3)zookeeper安装

一般不是在root用户下安装应用的,但是作为服务集群搭建测试,这里选择的是root用户

将 zookeeper-3.4.9.tar.gz放置于linux上某一个目录之下,这里如图所示,从左到右分别是129、130/131

20170907214911102

  1. 这里虚拟机129放置于/home/spirits/,虚拟机130和虚拟机131放置于/home/zhaoyi/
  2. 执行tar -zxvf zookeeper-3.4.9.tar.gz命令,然后去到解压文件下面的conf/目录下,新建zoo.cfg,内容如下:
  3. tickTime=2000 initLimit=10 syncLimit=5 dataDir=/tmp/zookeeper //数据目录,这里其实一般不放置于/tmp目录之下,因为这是临时的。一般我们会放置于和zookeeper //同一个目录下面如/home/spirits/zookeeper-3.4.9/data #dataLogDir=/home/zhaoyi/zookeeper-3.4.9/logs 日志目录,一般放置zookeeper同一个目录下面,可配置可不配置 clientPort=2181 server.129=192.168.164.129:2888:3888 server.130=192.168.164.130:2888:3888 server.131=192.168.164.131:2888:3888

参数说明:
①tickTime:心跳时间,毫秒为单位。

②initLimit:这个配置项是用来配置 Zookeeper 接受客户端(这里所说的客户端不是用户连接 Zookeeper服务器的客户端,而是 Zookeeper 服务器集群中连接到 Leader 的 Follower 服务器)初始化连接时最长能忍受多少个心跳时间间隔数。当已经超过 10 个心跳的时间(也就是 tickTime)长度后 Zookeeper 服务器还没有收到客户端的返回信息,那么表明这个客户端连接失败。总的时间长度就是 10*2000=20 秒。

③syncLimit:这个配置项标识 Leader 与 Follower 之间发送消息,请求和应答时间长度,最长不能超过多少个 tickTime 的时间长度,总的时间长度就是 5*2000=10 秒。

④dataDir:存储内存中数据库快照的位置。

⑤clientPort:监听客户端连接的端口

⑥server.A=B:C:D:其中 A 是一个数字,表示这个是第几号服务器;B 是这个服务器的 ip 地址;C 表示的是这个服务器与集群中的 Leader 服务器交换信息的端口;D 表示的是万一集群中的 Leader 服务器挂了,需要一个端口来重新进行选举,选出一个新的 Leader,而这个端口就是用来执行选举时服务器相互通信的端口。如果是伪集群的配置方式,由于 B 都是一样,所以不同的 Zookeeper 实例通信端口号不能一样,所以要给它们分配不同的端口号。

(4)dataDir参数对应目录下创建myid文件,将内容设置为上⑥中的A值,用来标识不同的服务器,从左到右分别是129、130、131

20170908094352482

(5)将zoo.cfg分别在所有服务器上对应目录都复制一份,从左到右分别是129、130、131

20170908094956215

三、测试zookeeper

(1)各节点上启动 zkServer.sh start

(2) 各节点查看状态 zkServer.sh status

注:如果状态 是Mode: follower 或者 Mode: leader 说明集群成功。

可能出现的问题:

(1)Error contacting service. It is probably not running.

无法启动的问题,使用zkServer.sh start-foreground启动查看日志。

(2)报错/tmp/zookeeper/myid file is missing

原因:zk集群中的节点需要获取myid文件内容来标识该节点,缺失则无法启动;

解决方法:在zk数据文件存放目录下(见 $ZK/conf/zoo.cfg,dataDir属性),创建myid文件并写入一个数字用来标识本节点(类似这个节点的身份证)。

三台机器分别执行:
echo 129 > /tmp/zookeeper/myid
echo 130 > /tmp/zookeeper/myid
echo 131 > /tmp/zookeeper/myid

由于配置在tmp目录,重启机器可能会丢失。

(3)其中一台zookeeper是单例状态 Mode: standalone ,重启下服务试试。

(4)报错java.net.NoRouteToHostException: No route to host (Host unreachable)

解决方法:关闭防火墙或者添加端口

1、关闭防火墙

1) 重启后生效
开启: chkconfig iptables on
关闭: chkconfig iptables off

2) 即时生效,重启后失效
开启: service iptables start
关闭: service iptables stop

3)查看防火墙状态
service iptables status

2、添加端口(本人没有测试过)

修改/etc/sysconfig/iptables 文件,执行以下命令,80是端口号
-A RH-Firewall-1-INPUT -m state —state NEW -m tcp -p tcp —dport 80 -j ACCEPT

四、集群成功

20170907221449703

则说明集群成功

发表评论

表情:
评论列表 (有 0 条评论,354人围观)

还没有评论,来说两句吧...

相关阅读

    相关 zookeeper

    zookeeper集群搭建 环境为安装的3个centos7虚拟机 Zookeeper节点个数(奇数)为3个。Zookeeper默认对外提供服务的端口号2181 。Zooke