MySQL高可用——MMM

太过爱你忘了你带给我的痛 2023-09-28 21:38 12阅读 0赞

MMM 即 Multi-Master Replication Manager for MySQL:mysql 多主复制管理器,基于 perl 实现,关于 mysql 主主复制配置的监控、故障转移和管理的一套可伸缩的脚本套件（在任何时候只有一个节点可以被写入），MMM 也能对从[服务器][Link 1]进行读负载均衡，所以可以用它来在一组用于复制的服务器启动虚拟 ip，除此之外，它还有实现数据备份、节点之间重新同步功能的脚本。MySQL 本身没有提供 replication failover 的解决方案，通过 MMM 方案能实现服务器的故障转移，从而实现 mysql 的高可用。MMM 不仅能提供浮动 IP 的功能，如果当前的主服务器挂掉后，会将你后端的从服务器自动转向新的主服务器进行同步复制，不用手工更改同步配置。这个方案是目前比较成熟的解决方案。

![427a28614466a47328fbc94dcd080fea.jpeg][]

**MMM主要功能由下面三个脚本提供：**

mmm\_mond 负责所有的监控工作的监控守护进程，决定节点的移除(mmm\_mond 进程定时心跳检测，失败则将 write ip 浮动到另外一台 master)等等

mmm\_agentd 运行在 mysql 服务器上的代理守护进程，通过简单远程服务集提供给监控节点

mmm\_control 通过命令行管理 mmm\_mond 进程

在整个监管过程中，需要在 mysql 中添加相关授权用户，授权的用户包括一个 mmm\_monitor用户和一个 mmm\_agent 用户，如果想使用 mmm 的备份工具则还要添加一个 mmm\_tools用户。

**一、MMM的部署实施**

**1、基本环境**

OS:centos7.2（64 位） 数据库系统：mysql5.7.13

关闭 selinux

配置 ntp，同步时间

![ff07207e1bf321c37374d6306ee4f7a6.jpeg][]

**2、在所有主机上配置/etc/hosts 文件，添加如下内容：**

![8c2425350130559239c5d5326017e0c6.png][]

在 所 有 主 机 上 安 装 perl perl-devel perl-CPAN libart\_lgpl.x86\_64 rrdtool.x86\_64 rrdtool-perl.x86\_64 包

\#yum -y install perl-\* libart\_lgpl.x86\_64 rrdtool.x86\_64 rrdtool-perl.x86\_64

注：使用 centos7 在线 yum 源安装

安装 perl 的相关库

\#cpan -i Algorithm::Diff Class::Singleton DBI DBD::mysql Log::Dispatch Log::Log4perl Mail::Send Net::Ping Proc::Daemon Time::HiRes Params::Validate Net::ARP

**3、在 master1、master2、slave1、slave2 主机上安装 mysql5.7 和配置复制**

master1 和 master2 互为主从，slave1、slave2 为 master1 的从

（1）在每个 mysql 的配置文件/etc/my.cnf 中加入以下内容， 注意 server-id 不能重复。

**master1 主机：**

![c75ae03502e3b3af1b2cb65475b761a5.png][]

**master2 主机：**

![0e4b1d8aef39e482b1d7491cfc54a49d.png][]

**slave1 主机：**

![a67a63ecc62bcd96916c26a553ff1e86.png][]

**slave2 主机：**

![ab2f5563f1546bd5d038187ad12308ad.png][]

注：在完成了对 my.cnf 的修改后，通过 systemctl restart mysqld 重新启动 mysql 服务。4 台数据库主机若要开启防火墙，要么关闭防火墙或者创建访问规则。

（2）主从配置（master1 和 master2 配置成主主，slave1 和 slave2 配置成 master1 的从）：

**在 master1 上授权：**

![2ff3088a2989f4f0b8039775a127a1f2.png][]

**在 master2 上授权：**

![88cf48da220c145c5218f981d2c0479f.png][]

（3）把 master2、slave1 和 slave2 配置成 master1 的从库：

在 master1 上执行 show master status; 获取 binlog 文件和 Position 点

![ec70a66d608d60bab16cfe6028816b18.jpeg][]

在 master2、slave1 和 slave2 执行：

![02b61b0c1135268ad62a6f4055389767.png][]

**验证主从复制：**

master2 主机：

![6b7f259830878a45fb3ad6d19bf0af0a.png][]

slave1 主机：

![93b875d208ec6d8ddde9541ebee526b5.jpeg][]

slave2 主机：

![2463755242e7ba5c1ebd98ede700744e.jpeg][]

如果 Slave\_IO\_Running 和 Slave\_SQL\_Running 都为 yes，那么主从就已经配置 OK 了

（4）把 master1 配置成 master2 的从库:

在 master2 上执行 show master status ;获取 binlog 文件和 Position 点

![0dd8b4b9d39085dcb2427830623ee1b6.png][]

在 master1 上执行：

![93371a952e93825fe51ffd1f804c3893.png][]

**验证主从复制：**

master1 主机：

![f66ef844419595ae5aff4a02c2909cfd.jpeg][]

如果 Slave\_IO\_Running 和 Slave\_SQL\_Running 都为 yes，那么主从就已经配置 OK 了

**4、mysql-mmm 配置：**

在 4 台 mysql 节点上创建用户：

![0bf23a2a1e417449e3b34061197dc9c6.jpeg][]

注 ：因为之前的主从复制，以及主从已经是 ok 的，所以我在 master1 服务器执行就 ok 了。

检查 master2 和 slave1、slave2 三台 db 上是否都存在监控和代理账号

![0d06a429af7064b3b5a5652ebbd5edab.jpeg][]

![511d7bf1e73eb9f22e042b2dd0513b83.jpeg][]

注 ：

mmm\_monitor 用户：mmm 监控用于对 mysql 服务器进程健康检查

mmm\_agent 用户：mmm 代理用来更改只读模式，复制的主服务器等

**5、mysql-mmm 安装**

在 monitor 主机(192.168.31.106) 上安装监控程序

![aa463a33fd6a7626529acf290f13efcd.jpeg][]

在[数据库服务][Link 2]器(master1、master2、slave1、slave2)上安装代理

![d97453b9c66b9b1bf81f6249e255d62c.jpeg][]

**6、配置 mmm**

编写配置文件，五台主机必须一致：

完成安装后，所有的配置文件都放到了/etc/mysql-mmm/下面。管理服务器和数据库服务器上都要包含一个共同的文件 mmm\_common.conf，

active\_master\_rolewriter\#积极的 master 角色的标示，所有的 db 服务器要开启 read\_only 参数，对于 writer 服务器监控代理会自动将 read\_only 属性关闭。

![5f82902e12c5fe01515daa93e6f09524.jpeg][]

![65db0d0e095148e3d910ce5e825829ae.jpeg][]

同时将这个文件拷贝到其它的服务器，配置不变

\#for host in master1 master2 slave1 slave2 ; do scp /etc/mysql-mmm/mmm\_common.conf $host:/etc/mysql-mmm/ ; done

代理文件配置

编辑 4 台 mysql 节点机上的/etc/mysql-mmm/mmm\_agent.conf

![78198254553db7f746966edc0aedad56.png][]

注：这个配置只配置 db 服务器，监控服务器不需要配置，this 后面的 host 名改成当前服务器的主机名。

启动代理进程

在 /etc/init.d/mysql-mmm-agent 的脚本文件的\#!/bin/sh 下面，加入如下内容

source /root/.bash\_profile

添加成系统服务并设置为自启动

![1f119231496ba7ff0722a3ce2248d88c.png][]

注：添加 source /root/.bash\_profile 目的是为了 mysql-mmm-agent 服务能启机自启。自动启动和手动启动的唯一区别，就是激活一个 console 。那么说明在作为服务启动的时候，可能是由于缺少环境变量

服务启动失败，报错信息如下

![10cc0594f8bace6ebaa26ce75b384317.jpeg][]

**解决方法：**

![7362842c381aafd623a5c69fb1f238b1.jpeg][]

配置防火墙

编辑 monitor 主机上的/etc/mysql-mmm/mmm\_mon.conf

![680d9a7e8849620f267c44a258095a1d.jpeg][]

![bdee99cd1021da51dc80327df4aa5df4.jpeg][]

debug 0\#debug 0 正常模式，1 为 debug 模式

启动监控进程：

在 /etc/init.d/mysql-mmm-agent 的脚本文件的\#!/bin/sh 下面，加入如下内容

source /root/.bash\_profile

添加成系统服务并设置为自启动

![7eefffca9f1775668f708162faf26d5e.png][]

**启动报错:**

![e229fb9229501db00a9670e2072b64cb.jpeg][]

解决方法：安装下列 perl 的库

![85f7364956b8ea46bd93ae2b405c3bc0.png][]

![28c2982390353f42c968f5babc8bf77b.jpeg][]

注 ：无论是在 db 端还是在监控端如果有对配置文件进行修改操作都需要重启代理进程和监控进程。MMM 启动顺序：先启动 monitor，再启动 agent

**检查集群状态：**

![7dff33c5ad1f49cf2c3dbb17959fcb4b.jpeg][]

如果服务器状态不是 ONLINE，可以用如下命令将服务器上线，例如：

\#mmm\_controlset\_online 主机名

例如：\[root@monitor1 ~\]\#mmm\_controlset\_onlinemaster1

从上面的显示可以看到，写请求的 VIP 在 master1 上，所有从节点也都把 master1 当做主节点。

查看是否启用 vip

![a5c79f5e4f084b747b5b64a2bbc3af87.jpeg][]

![44ffb8e4a33f7e2f99b8c9013fb8663a.jpeg][]

![2ff575c78dcd2c35469dec240a085215.jpeg][]

![4216a34b7ae45d484539be62e3f6da0b.jpeg][]

在 master2，slave1，slave2 主机上查看主 mysql 的指向

![2f13723eaa1049c99708bb501f28cfa9.jpeg][]

**二、MMM 高可用性测试：**

服务器读写采有 VIP 地址进行读写，出现故障时 VIP 会漂移到其它节点，由其它节点提供服务。

首先查看整个集群的状态，

![12cc8e7d67aeddf98de07e494005e577.jpeg][]

模拟 master1 宕机，手动停止 mysql 服务，观察 monitor 日志,master1 的日志如下：

![a43eedc48fea30abaace5c68a020bc6d.jpeg][]

![144e07aeee76066fb505785c70973297.jpeg][]

查看群集的最新状态

![2196c8945a4ede027ebbea51b26a25d8.jpeg][]

从显示结果可以看出 master1 的状态有 ONLINE 转换为 HARD\_OFFLINE，写 VIP 转移到了master2 主机上。

检查所有的 db 服务器群集状态

![dedd4b3fa166d1ae06d918b804c1075e.jpeg][]

从上面可以看到 master1 能 ping 通，说明只是服务死掉了。

查看 master2 主机的 ip 地址：

![bcb136e7177accfaac40eaa7cbd192cd.jpeg][]

![3a5274235b62122faae96b997f0ed277.jpeg][]

启动 master1 主机的 mysql 服务，观察 monitor 日志,master1 的日志如下：

![48352b72fa0175898fe05a849a37b89e.jpeg][]

从上面可以看到 master1 的状态由 hard\_offline 改变为 awaiting\_recovery 状态

用如下命令将服务器上线：

![9fdf4ac6ff111c9aa60db7d81aa3acd0.jpeg][]

可以看到主库启动不会接管主，只到现有的主再次宕机。

**总结：**

**优点：**高可用性，扩展性好，出现故障自动切换，对于主主同步，在同一时间只提供一台数据库写操作，保证的数据的一致性。当主服务器挂掉以后，另一个主立即接管，其他的从服务器能自动切换，不用人工干预。

**缺点：**monitor 节点是单点，不过这个你也可以结合 keepalived 或者 haertbeat 做成高可用;至少三个节点，对主机的数量有要求，需要实现读写分离,还需要在前端编写读写分离程序。在读写非常繁忙的业务系统下表现不是很稳定，可能会出现复制延时、切换失效等问题。MMM 方案并不太适应于对数据安全性要求很高，并且读、写繁忙的环境中。

**适用场景:**

MMM 的适用场景为数据库访问量大，并且能实现读写分离的场景

(1)master2 备选主节点宕机不影响集群的状态，就是移除了 master2 备选节点的读状态。

(2)master1 主节点宕机，由 master2 备选主节点接管写角色，slave1,slave2 指向新 master2主库进行复制，slave1,slave2 会自动 change master 到 master2.

(3)如果 master1 主库宕机，master2 复制应用又落后于 master1 时就变成了主可写状态，这时的数据主无法保证一致性。

如果 master2,slave1,slave2 延迟于 master1 主，这个时 master1 宕机，slave1,slave2 将会

等待数据追上 db1 后，再重新指向新的主 node2 进行复制操作，这时的数据也无法保证同步的一致性。

(4)如果采用 MMM 高可用架构，主，主备选节点机器配置一样，而且开启半同步进一步提高安全性或采用 [MariaDB][]/mysql5.7 进行多线程从复制，提高复制的性能。

来源：[MySQL高可用——MMM - 腾讯云开发者社区-腾讯云][MySQL_MMM - _-]

[Link 1]: https://cloud.tencent.com/product/cvm?from=10680
[427a28614466a47328fbc94dcd080fea.jpeg]: https://img-blog.csdnimg.cn/img_convert/427a28614466a47328fbc94dcd080fea.jpeg
[ff07207e1bf321c37374d6306ee4f7a6.jpeg]: https://img-blog.csdnimg.cn/img_convert/ff07207e1bf321c37374d6306ee4f7a6.jpeg
[8c2425350130559239c5d5326017e0c6.png]: https://img-blog.csdnimg.cn/img_convert/8c2425350130559239c5d5326017e0c6.png
[c75ae03502e3b3af1b2cb65475b761a5.png]: https://img-blog.csdnimg.cn/img_convert/c75ae03502e3b3af1b2cb65475b761a5.png
[0e4b1d8aef39e482b1d7491cfc54a49d.png]: https://img-blog.csdnimg.cn/img_convert/0e4b1d8aef39e482b1d7491cfc54a49d.png
[a67a63ecc62bcd96916c26a553ff1e86.png]: https://img-blog.csdnimg.cn/img_convert/a67a63ecc62bcd96916c26a553ff1e86.png
[ab2f5563f1546bd5d038187ad12308ad.png]: https://img-blog.csdnimg.cn/img_convert/ab2f5563f1546bd5d038187ad12308ad.png
[2ff3088a2989f4f0b8039775a127a1f2.png]: https://img-blog.csdnimg.cn/img_convert/2ff3088a2989f4f0b8039775a127a1f2.png
[88cf48da220c145c5218f981d2c0479f.png]: https://img-blog.csdnimg.cn/img_convert/88cf48da220c145c5218f981d2c0479f.png
[ec70a66d608d60bab16cfe6028816b18.jpeg]: https://img-blog.csdnimg.cn/img_convert/ec70a66d608d60bab16cfe6028816b18.jpeg
[02b61b0c1135268ad62a6f4055389767.png]: https://img-blog.csdnimg.cn/img_convert/02b61b0c1135268ad62a6f4055389767.png
[6b7f259830878a45fb3ad6d19bf0af0a.png]: https://img-blog.csdnimg.cn/img_convert/6b7f259830878a45fb3ad6d19bf0af0a.png
[93b875d208ec6d8ddde9541ebee526b5.jpeg]: https://img-blog.csdnimg.cn/img_convert/93b875d208ec6d8ddde9541ebee526b5.jpeg
[2463755242e7ba5c1ebd98ede700744e.jpeg]: https://img-blog.csdnimg.cn/img_convert/2463755242e7ba5c1ebd98ede700744e.jpeg
[0dd8b4b9d39085dcb2427830623ee1b6.png]: https://img-blog.csdnimg.cn/img_convert/0dd8b4b9d39085dcb2427830623ee1b6.png
[93371a952e93825fe51ffd1f804c3893.png]: https://img-blog.csdnimg.cn/img_convert/93371a952e93825fe51ffd1f804c3893.png
[f66ef844419595ae5aff4a02c2909cfd.jpeg]: https://img-blog.csdnimg.cn/img_convert/f66ef844419595ae5aff4a02c2909cfd.jpeg
[0bf23a2a1e417449e3b34061197dc9c6.jpeg]: https://img-blog.csdnimg.cn/img_convert/0bf23a2a1e417449e3b34061197dc9c6.jpeg
[0d06a429af7064b3b5a5652ebbd5edab.jpeg]: https://img-blog.csdnimg.cn/img_convert/0d06a429af7064b3b5a5652ebbd5edab.jpeg
[511d7bf1e73eb9f22e042b2dd0513b83.jpeg]: https://img-blog.csdnimg.cn/img_convert/511d7bf1e73eb9f22e042b2dd0513b83.jpeg
[aa463a33fd6a7626529acf290f13efcd.jpeg]: https://img-blog.csdnimg.cn/img_convert/aa463a33fd6a7626529acf290f13efcd.jpeg
[Link 2]: https://cloud.tencent.com/product/dbexpert?from=10680
[d97453b9c66b9b1bf81f6249e255d62c.jpeg]: https://img-blog.csdnimg.cn/img_convert/d97453b9c66b9b1bf81f6249e255d62c.jpeg
[5f82902e12c5fe01515daa93e6f09524.jpeg]: https://img-blog.csdnimg.cn/img_convert/5f82902e12c5fe01515daa93e6f09524.jpeg
[65db0d0e095148e3d910ce5e825829ae.jpeg]: https://img-blog.csdnimg.cn/img_convert/65db0d0e095148e3d910ce5e825829ae.jpeg
[78198254553db7f746966edc0aedad56.png]: https://img-blog.csdnimg.cn/img_convert/78198254553db7f746966edc0aedad56.png
[1f119231496ba7ff0722a3ce2248d88c.png]: https://img-blog.csdnimg.cn/img_convert/1f119231496ba7ff0722a3ce2248d88c.png
[10cc0594f8bace6ebaa26ce75b384317.jpeg]: https://img-blog.csdnimg.cn/img_convert/10cc0594f8bace6ebaa26ce75b384317.jpeg
[7362842c381aafd623a5c69fb1f238b1.jpeg]: https://img-blog.csdnimg.cn/img_convert/7362842c381aafd623a5c69fb1f238b1.jpeg
[680d9a7e8849620f267c44a258095a1d.jpeg]: https://img-blog.csdnimg.cn/img_convert/680d9a7e8849620f267c44a258095a1d.jpeg
[bdee99cd1021da51dc80327df4aa5df4.jpeg]: https://img-blog.csdnimg.cn/img_convert/bdee99cd1021da51dc80327df4aa5df4.jpeg
[7eefffca9f1775668f708162faf26d5e.png]: https://img-blog.csdnimg.cn/img_convert/7eefffca9f1775668f708162faf26d5e.png
[e229fb9229501db00a9670e2072b64cb.jpeg]: https://img-blog.csdnimg.cn/img_convert/e229fb9229501db00a9670e2072b64cb.jpeg
[85f7364956b8ea46bd93ae2b405c3bc0.png]: https://img-blog.csdnimg.cn/img_convert/85f7364956b8ea46bd93ae2b405c3bc0.png
[28c2982390353f42c968f5babc8bf77b.jpeg]: https://img-blog.csdnimg.cn/img_convert/28c2982390353f42c968f5babc8bf77b.jpeg
[7dff33c5ad1f49cf2c3dbb17959fcb4b.jpeg]: https://img-blog.csdnimg.cn/img_convert/7dff33c5ad1f49cf2c3dbb17959fcb4b.jpeg
[a5c79f5e4f084b747b5b64a2bbc3af87.jpeg]: https://img-blog.csdnimg.cn/img_convert/a5c79f5e4f084b747b5b64a2bbc3af87.jpeg
[44ffb8e4a33f7e2f99b8c9013fb8663a.jpeg]: https://img-blog.csdnimg.cn/img_convert/44ffb8e4a33f7e2f99b8c9013fb8663a.jpeg
[2ff575c78dcd2c35469dec240a085215.jpeg]: https://img-blog.csdnimg.cn/img_convert/2ff575c78dcd2c35469dec240a085215.jpeg
[4216a34b7ae45d484539be62e3f6da0b.jpeg]: https://img-blog.csdnimg.cn/img_convert/4216a34b7ae45d484539be62e3f6da0b.jpeg
[2f13723eaa1049c99708bb501f28cfa9.jpeg]: https://img-blog.csdnimg.cn/img_convert/2f13723eaa1049c99708bb501f28cfa9.jpeg
[12cc8e7d67aeddf98de07e494005e577.jpeg]: https://img-blog.csdnimg.cn/img_convert/12cc8e7d67aeddf98de07e494005e577.jpeg
[a43eedc48fea30abaace5c68a020bc6d.jpeg]: https://img-blog.csdnimg.cn/img_convert/a43eedc48fea30abaace5c68a020bc6d.jpeg
[144e07aeee76066fb505785c70973297.jpeg]: https://img-blog.csdnimg.cn/img_convert/144e07aeee76066fb505785c70973297.jpeg
[2196c8945a4ede027ebbea51b26a25d8.jpeg]: https://img-blog.csdnimg.cn/img_convert/2196c8945a4ede027ebbea51b26a25d8.jpeg
[dedd4b3fa166d1ae06d918b804c1075e.jpeg]: https://img-blog.csdnimg.cn/img_convert/dedd4b3fa166d1ae06d918b804c1075e.jpeg
[bcb136e7177accfaac40eaa7cbd192cd.jpeg]: https://img-blog.csdnimg.cn/img_convert/bcb136e7177accfaac40eaa7cbd192cd.jpeg
[3a5274235b62122faae96b997f0ed277.jpeg]: https://img-blog.csdnimg.cn/img_convert/3a5274235b62122faae96b997f0ed277.jpeg
[48352b72fa0175898fe05a849a37b89e.jpeg]: https://img-blog.csdnimg.cn/img_convert/48352b72fa0175898fe05a849a37b89e.jpeg
[9fdf4ac6ff111c9aa60db7d81aa3acd0.jpeg]: https://img-blog.csdnimg.cn/img_convert/9fdf4ac6ff111c9aa60db7d81aa3acd0.jpeg
[MariaDB]: https://cloud.tencent.com/product/tdsql?from=10680
[MySQL_MMM - _-]: https://cloud.tencent.com/developer/article/1349529?from=15425