运维笔记27 （搭建高可用集群管理软件(HA套件)，配置虚拟fence断电管理）

心已赠人 2022-07-12 06:49 52阅读 0赞

概述：

我们使用yum源自带的HighAvailability软件，进行集群的部署，而且这个套件自带web的图形管理界面，作为第一个尝试的集群管理软件是非常好入门的，但是要注意把集群机器的yum源配置好，下面进行介绍。

集群拓扑图：

![Center][]

1.集群管理软件的安装

在安装软件之前，先配置好各个集群的网络，主机名字，yum源等。

![Center 1][]

这是第一台的网络配置文件，也就集群拓扑图中的结点1。

配置主机名字，在/etc/sysconfig/network永久更改主机名，hostname立即更改主机名，并且将ip与主机名的对应添加进整个集群的hosts文件。

![Center 2][]

接下来是最重要的，也就是配置yum源，我们正常的yum源文件可能如下面这样

![Center 3][]

这是我们正常的yum配置文件，只是把yum的路径写到了镜像的根目录下，其实是默认指向镜像的Server目录，一般镜像下的软件包有五个分别是HighAvailability（高可用集群需要的软件包），LoadBalancer（负载均衡需要的软件包），ResilientStorage（存储恢复需要的软件包），ScalableFileSystem（大规模文件系统需要的软件包），Server（我们正常使用的yum源）。

我们接下来需要用到其他四个软件包，所以我们要把其他四个加入yum源中。

![Center 4][]

将以上的配置在其他两台机器布置好。a

这时可用ssh远程连接虚拟机，而且在终端的操作比较方便，最左边是宿主机server0，然后是server1，server2，server3。

![Center 5][]

现在开始安装集群需要的管理软件，首先在server1，server2上安装ricci。之后在server3上安装luci。

luci是HA的管理软件服务端，ricci是HA管理软件的客户端，这套管理软件可以帮助我们部署集群。ricci安装好后，要给ricci这个系统用户设定一个密码。之后在server1,server2开启ricci服务，server3开启luci服务

[root@server1 ~]# /etc/init.d/ricci start
    Starting system message bus:                               [  OK  ]
    Starting oddjobd:                                          [  OK  ]
    generating SSL certificates...  done
    Generating NSS database...  done
    Starting ricci:                                            [  OK  ]
    [root@server1 ~]# chkconfig ricci on

[root@server3 ~]# /etc/init.d/luci start

接下来可以访问web端的高可用集群管理系统了。打开浏览器输入https://server3.mo.com:8084  
  
![Center 6][]

这里输入luci的root用户名和密码即可登陆了。

这就是server1节点的状况![Center 7][]

选择Manage Clusters，之后点击Create节点。

![Center 8][]

图中Cluster Name是集群名字，随意起一个即可，不要和内网其他集群重复，接下来添加的节点就是我们两个安装ricci的机器，密码就是我们装完软件给ricci用户设置的密码，最后切记ricii要在那两台机器上都启动。

![Center 9][]

现在进入集群的自动部署，也就是装一些集群需要的软件。

![Center 10][]

安装好后就可以看到两台节点的状况了。

![Center 11][]

这就是server1节点的状况。

2.fence系统

我们把集群创建好后，却无法测试一下集群是否生效，现在咱们装上这个电源管理fence，真实情况下这是一个硬件，来让服务器直接断电的，这时候大家会问了为什么要给服务器直接断电，这样不会丢失数据吗？现在设想一个情况，有三台服务器，两台是结点，一台是存储服务器如nfs或者scsi，结点1是正常向外提供服务的机器，但是结点1突然挂掉了，高可用集群就会将服务迁移到结点2，而且存储也接到了结点2，为了防止结点1继续向存储服务器上写数据，我们就要让他断电，因为直接断电，服务器不会执行sync，也就是将内存上的数据写到磁盘上，这样就保护了存储服务器的硬盘。

现在通过这个管理软件conga，我们来添加一个虚拟的fence。

![Center 12][]

选择Fence Devices。然后点击ADD

![Center 13][]

添加一个Fence virt（多播模式的），之后点击提交。

接下来切换回Nodes的选项栏，点击某个结点

![Center 14][]

在这里给server1添加一个fence点。

![Center 15][]

之后点击Add Fence instance，这里要确定你的虚拟机的UUID，因为我们要关闭的是虚拟UUID是唯一确定虚拟机的标识。

![Center 16][]

两个结点均这样添加好后，Conga端的fence配置就结束了，现在需要让真机支持fence，我们需要下载真机的fence支持软件。

fence-virtd.x86_64 : Daemon which handles requests from fence-virt
    fence-virtd-libvirt.x86_64 : Libvirt backend for fence-virtd
    fence-virtd-multicast.x86_64 : Multicast listener for

安装这三个软件即可。然后将让真机生成一个128位的秘钥，发送给server1,server2。还要修改配置文件，使用fence\_virtd -c即可进入配置，我们需要修改的就是把桥接改掉即可，因为我们桥接到了br0上。秘钥就是/etc/cluster/fence\_xvm.key文件，将他发送给server1和server2。接下来就可以测试fence是否配置正确了。

[root@server1 ~]# fence_node server2.mo.com
    fence server2.mo.com success

使用这条命令就将server2断电了。

[Center]: /images/20220711/bbf44fb8a5b844b3b1538bb6ebe516d2.png
[Center 1]: /images/20220711/f3679c9e808c4344a5632f34bef71f68.png
[Center 2]: /images/20220711/0e7b7728befc4dec8e68ddce7ab5c46e.png
[Center 3]: /images/20220711/0fd56338d3c04d03a9754f96acef1907.png
[Center 4]: /images/20220711/c907898a01e04ba5b4bf1c6f0d593471.png
[Center 5]: /images/20220711/5471ba429859400e8ed7a7f997237cdf.png
[Center 6]: /images/20220711/2cf95d07f6564b34b8922f0187d00e08.png
[Center 7]: /images/20220711/d2330e4fa8b641b6a075bb8dbc1eab9b.png
[Center 8]: /images/20220711/1d4e259c775544b1a719f40ccd6ac978.png
[Center 9]: /images/20220711/3b28f44720e94d2a90e53ea5df6f5cbe.png
[Center 10]: /images/20220711/61478c7504d244b5990e462b898fff6e.png
[Center 11]: /images/20220711/12911775b41e4f0ea1ef04204370cbb9.png
[Center 12]: /images/20220711/f24fb53b14444558bb60cac33037648f.png
[Center 13]: /images/20220711/0de3f5251b6f43cf9e7b803c7e392718.png
[Center 14]: /images/20220711/1a35ce0deaa34c70908d3489f8edc5c5.png
[Center 15]: /images/20220711/f0aa345fecdd459681a5ebaa9e07452f.png
[Center 16]: /images/20220711/0b4ad80ef5be48dd9a9004fdfed8a3c6.png