Mysql M-S-S 中继模式

清疚 2022-10-06 02:55 114阅读 0赞

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70][]

# **使用 Mycat 实现 M-S-S 模式读写分离** #

*  实验环境 
 *  Mycat               192.168.2.2      CentOS Linux release 8.3.2011
 *  Mysql Master   192.168.2.3      CentOS Linux release 7.5.1804
 *  Mysql 中继       192.168.2.5     CentOS Linux release 7.6.1810
 *  Mysql slave      192.168.2.6     CentOS Linux release 7.6.1810
 *  firewalld、iptables以及 selinux 均为关闭状态
 *  Mysql 版本统一使用 mysql-5.7.25
 *  分别在 **2.3    2.5    2.6**   3台服务器上安装 mysql
 *  yum install -y ./mysql-5.7/mysql\*.rpm

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 1][]

![20210611082152606.png][]

![20210611082207814.png][]

*  安装完成后启动mysql
 *  systemctl enable mysqld --now

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 2][]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 3][]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 4][]

*  关闭密码强度审计插件
 *  echo "validate-password=OFF">> /etc/my.cnf
 *  systemctl restart mysqld
 *  分别修改3台服务器的 root 用户密码
 *  grep "password" /var/log/mysqld.log
 *  mysql -uroot -p'**Dlr%wM?<a6pC**'
 *  mysql> set password for root@localhost = password('123456');  
    Query OK, 0 rows affected, 1 warning (0.00 sec)
    
    mysql> flush privileges;  
    Query OK, 0 rows affected (0.00 sec)
    
    mysql>
    
    ![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 5][]
    
    ![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 6][]
    
    ![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 7][]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 8][]

*  **重新登陆后，在主服务器 192.168.2.3 上授权用户**
 *  mysql -uroot -p'123456'
 *  >grant replication slave on \*.\* to slave@'192.168.2.%' identified by '123456';
 *  >create database mydata;
 *  >use mydata;
 *  >create table T1(id int,name varchar(20));
 *  >insert into T1 values(1,'zhangsan');

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 9][]

*  退出数据库，导出刚才创建的数据库
 *  mysqldump -u root -p -B mydata > /tmp/mysql\_mydata.sql
 *

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 10][]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 11][]

*  编辑配置文件 /etc/my.cnf
 *  vim /etc/my.cnf  
    \[mysqld\]  
    datadir=/var/lib/mysql  
    socket=/var/lib/mysql/mysql.sock
    
    log-bin=mysql-bin-master  
    server-id=1  
    binlog-do-db=mydata          \#指定要同步的库  
    binlog-ignore-db=mysql      \#忽略要同步的库  
    sync-binlog=1                     \#执行 N 次写入 binlog 后，与硬盘同步  
    binlog-format=row              \#binlog 保存方式，记录哪条数据被修改了

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 12][]

--------------------

*  查看log\_bin系统变量的设置
 *  >show variables like 'log\_bin';
 *  
 *  ### **接下来 部署 slave 中继服务器 192.168.2.5**  ###
 *  导入刚才导出的数据库文件
 *  scp root@192.168.2.3:/tmp/mysql\_mydata.sql /tmp
 *  mysql -uroot -p123456 < /tmp/mysql\_mydata.sql
 *  mysql -uroot -p123456 -e "select \* from mydata.T1"

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 13][]

*  编辑配置文件 /etc/my.cnf
 *  vim /etc/my.cnf  
    \[mysqld\]  
    datadir=/var/lib/mysql  
    socket=/var/lib/mysql/mysql.sock
    
    server-id=2  
    log-bin=mysql-bin-slave1  
    log-slave-updates=1    
    binlog-format=row
 *  **log-slave-updates  把它从 relay-log 当中读取出来的二进制日志并且这本机上执行的操作也记录这自己的二进制日志里面，这样才能使第三台 slave 通过中继 slave 读取到相应数据变化**

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 14][]

*  开始配置主从同步
 *  ### **在中继服务器 192.168.2.5 上** ###
 *  mysql -uroot -p123456
 *  >stop slave;
 *  >change master to master\_host='192.168.2.3',master\_user='slave',master\_password='123456';
 *  >start slave;
 *  >show slave status \\G

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 15][]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 16][]

*  测试 在 192.168.2.3 主服务器上插入数据

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 17][]

*  然后在从服务器 192.168.2.5 上查看

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 18][]

*  手动刷新 bin-log
 *  >flush logs
 *

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 19][]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 20][]

*  ### **在 192.168.2.5 上添加授权用户** ###
 *  mysql>grant replication slave on \*.\* to slave@'192.168.2.%' identified by '123456';  
    Query OK, 0 rows affected, 1 warning (0.01 sec)
    
    mysql> flush privileges;  
    Query OK, 0 rows affected (0.00 sec)
    
    mysql> select user,host from mysql.user;

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 21][]

--------------------

*  ### **接下来 部署 slave  192.168.2.6** ###
 *  导入数据库
 *  scp root@192.168.2.5:/tmp/mysql\_mydata.sql /tmp
 *  mysql -uroot -p < /tmp/mysql\_mydata.sql

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 22][]

*  编辑 配置文件 /etc/my.cnf
 *  vim /etc/my.cnf
    
    \[mysqld\]  
      
    datadir=/var/lib/mysql  
    socket=/var/lib/mysql/mysql.sock
    
    server-id=3  
    log-bin=mysql-bin-slave2   
    binlog-format=row

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 23][]

*  ### **指定 slave 中继服务 192.168.2.5** ###
 *  mysql -uroot -p123456
 *  >stop slave;
 *  >change master to master\_host='192.168.2.5',master\_user='slave',master\_password='123456';
 *  >flush privileges;
 *  >start slave;

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 24][]

![20210611093417824.png][]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 25][]

*  测试 在 主服务器上插入数据

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 26][]

*  在中继和从服务器上查看

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 27][]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 28][]

*  ### **模拟故障：**   由于历史遗留问题，MySQL 主从库的表结构不一致，主库的某个表 tableA 比从库表 tableA 少了一个字段。   当尝试在主库上更改表结构时，这行 alter 语句会随着 binlog 同步到从库，如果从库执行这行语句时出错，主从同步线程就会自动停止，那样只能人为手动处理错误，然后再启动 slave 上的主从同步线程。 ###
 *  **首先在从库 192.168.2.6 上添加这个字段：**
 *  **>alter table mydata.T1 add age int default 0 after name;**
 *  
 *  然后在主库 **192.168.2.3** 上添加这个字段：
 *  >**alter table mydata.T1 add age int default 0 after name;**
 *  
 *  **查看从库 192.168.2.6 的 slave 状态**
 *  **mysql> show slave status \\G  
    \*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\* 1. row \*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\***  
    **               Slave\_IO\_State: Waiting for master to send event  
                      Master\_Host: 192.168.2.5  
                      Master\_User: slave  
                      Master\_Port: 3306  
                    Connect\_Retry: 60  
                  Master\_Log\_File: mysql-bin-slave1.000001  
              Read\_Master\_Log\_Pos: 1301  
                   Relay\_Log\_File: c7\_2\_6-relay-bin.000002  
                    Relay\_Log\_Pos: 1337  
            Relay\_Master\_Log\_File: mysql-bin-slave1.000001**  
    **             Slave\_IO\_Running: Yes  
                Slave\_SQL\_Running: No  
               ** **  Replicate\_Do\_DB:   
              Replicate\_Ignore\_DB:   
               Replicate\_Do\_Table:   
           Replicate\_Ignore\_Table:   
          Replicate\_Wild\_Do\_Table:   
      Replicate\_Wild\_Ignore\_Table:   
                       Last\_Errno: 1060**  
    **                   Last\_Error: Error 'Duplicate column name 'age'' on query. Default database: ''. Query: 'alter table mydata.T1 add age int default 0 after name'**
 *  
 *  ### **解决办法** ###
 *  首先在主库上停止 bin-log
 *  mysql> set sql\_log\_bin=off;
 *  
 *  然后再执行 alter 语句  
    mysql> alter table T1 add sex int default 0 after name;
 *  
 *  再开启 bin-log  
    mysql> set sql\_log\_bin=on;
 *  
 *  **mysql> set sql\_log\_bin=off;  
    Query OK, 0 rows affected (0.00 sec)**
    
      
    **mysql> alter table mydata.T1 add sex int default 0 after name;  
    Query OK, 0 rows affected (0.03 sec)  
    Records: 0  Duplicates: 0  Warnings: 0**
    
    **mysql> set sql\_log\_bin=on;  
    Query OK, 0 rows affected (0.00 sec)**
 *  然后在从库查看  
    mysql> show slave status\\G  
    还是 no 是因为上次的 alter 没有同步  
    做如下操作恢复  
    mysql> stop slave;
 *  change master to master\_log\_file='mysql-bin-slave1.000001',master\_log\_pos=1301;
 *  mysql> start slave;  
    mysql> show slave status \\G

![2021061109533260.png][]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 29][]

*  在主库上插入数据

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 30][]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 31][]

--------------------

*  # **然后在 192.168.2.2 上配置 Mycat** #
 *  详细设置请参阅：[https://blog.csdn.net/gaofei0428/article/details/117503469?spm=1001.2014.3001.5501][https_blog.csdn.net_gaofei0428_article_details_117503469_spm_1001.2014.3001.5501]
 *  编辑 /usr/local/mycat/conf/server.xml 配置文件
 *   vim /usr/local/mycat/conf/server.xml  
    <?xml version="1.0" encoding="UTF-8"?>  
      
    <!DOCTYPE mycat:server SYSTEM "server.dtd">  
    <mycat:server xmlns:mycat="http://io.mycat/">  
            <system>  
            <property name="nonePasswordLogin">1</property>   
            <property name="ignoreUnknownCommand">0</property>  
            <property name="useHandshakeV10">1</property>  
        <property name="removeGraveAccent">1</property>  
            <property name="useSqlStat">0</property>    
            <property name="useGlobleTableCheck">0</property>    
            <property name="sqlExecuteTimeout">300</property>    
                    <property name="sequenceHandlerType">1</property>  
              
              
            <property name="sequnceHandlerPattern">(?:(\\s\*next\\s+value\\s+for\\s\*MYCATSEQ\_(\\w+))(,|\\)|\\s)\*)+</property>  
            <property name="subqueryRelationshipCheck">false</property>   
            <property name="sequenceHanlderClass">io.mycat.route.sequence.handler.HttpIncrSequenceHandler</property>  
             
               
              
              
              
                    <property name="processorBufferPoolType">0</property>  
                      
    "/usr/local/mycat/conf/server.xml" \[dos\] 134L, 6443C                                                                                                                 
              
              
              
            
    
            <user name="gf" defaultAccount="true">    user name 定义 mycat 管理账号，名称可以自定义，无需创建该用户  
                    <property name="password">123456</property>  
                    <property name="schemas">mydata</property>  
                    <property name="defaultSchema">mydata</property>  
                    
    
                      
                      
            </user>
    
            <user name="user">  
                    <property name="password">user</property>  
                    <property name="schemas">mydata</property>  
                    <property name="readOnly">true</property>  
                    <property name="defaultSchema">mydata</property>  
            </user>
    
    </mycat:server>
 *  ### **添加 slave 从服务器为读服务器** ###
 *  **vim /usr/local/mycat/conf/schema.xml**  
    <?xml version="1.0" encoding="UTF-8"?>  
    <!DOCTYPE mycat:schema SYSTEM "schema.dtd">  
    <mycat:schema xmlns:mycat="http://io.mycat/">  
            <schema name="mydata" checkSQLschema="false" sqlMaxLimit="100" dataNode='dn1'>  
            </schema>
    
            <dataNode name="dn1" dataHost="dthost" database="mydata"/>  
            <dataHost name="dthost" maxCon="500" minCon="10" balance="1" writeType="0" dbType="mysql" dbDriver="native" switchType="-1" slaveThreshold="100">  
                    <heartbeat>show slave status</heartbeat>  
                    <writeHost host="c7\_2\_3" url="192.168.2.3:3306" user="mycat" password="123456">  
                    </writeHost>  
                    <writeHost host="c7\_2\_5" url="192.168.2.5:3306" user="mycat" password="123456">  
                            <readHost host="c7\_2\_6" url="192.168.2.6:3306" user="mycat" password="123456"></readHost>  
                    </writeHost>  
            </dataHost>  
     </mycat:schema>
 *  # 重启服务 #

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 32][]

*  尝试登陆 Mycat
 *  mysql -ugf -p -h192.168.2.2 -P8066
 *  配置文件中指定了不需要密码登陆，直接回车即可

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 33][]

*  查看读写记录
 *  mysql -uroot -p123456 -h192.168.2.2 -P9066 -e "show @@datasource"

![202106111041436.png][]

*  测试读写分离

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 34][]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 35][]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 36][]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 37][]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 38][]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 39][]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 40][]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 41][]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 42][]

*  # 测试主库故障 #

![20210615213707101.png][]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 43][]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 44][]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 45][]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 46][]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 47][]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 48][]

--------------------

# **Mysql日志类型** #

*   二进制日志 
 *  事务日志
 *  一般查询日志
 *  中继日志
 *  慢查询日志

# **二进制日志** #

*  二进制日志通常记录的是可能潜在引起数据库发生改变的操作，每一个操作我们称为一个event。
 *  二进制日志记录一个event的时候，通常还会记录timestamp,position(偏移量offset)，server-id，event本身。
 *  二进制日志的数据存储形式，形如mysql-bin.xxxxxx这种，二进制日志除了mysql-bin.xxxxxx之外，还有mysql-bin.index(二进制日志索引文件)
 *  二进制日志滚动条件：容量达到定义的最大上限，flush logs ,服务器重启
 *  二进制日志删除：一般不建议用rm直接删除，建议用mysql的PURGE命令清除
 *                   语法：PURGE \{MASTER | BINARY\} LOGS TO 'log\_name'    \# 删除指定的日志
 *                             PURGE \{MASTER | BINARY\} LOGS BEFORE 'date'  \# 删除日期之前的日志，BEFORE变量的date自变量可以为'YYYY-MM-DD hh:mm:ss'格式
 *                       如：（MASTER 和BINARY 在这里都是等效的）
 *                             PURGE MASTER LOGS TO 'test-bin.000001';   
 *                             PURGE MASTER LOGS BEFORE '2011-01-0100:00:00';
 *  二进制日志格式：statement(mysql官方不推荐)
 *                            ** row(mysql 5.6以后推荐)**
 *                             mixed
 *  二进制日志查看：     
 *                  查看当前mysql使用的二进制文件及处在哪个position上：SHOW MASTER STATUS;
 *                  查看当前mysql上使用的二进制文件列表：SHOW BINARY LOGS;
 *                  查看某个二进制日志文件的具体内容：SHOW BINARY EVENTS IN 'mysql-bin.1234567';
 *  二进制日志用途：
 *  二进制日志可以即时点还原，因为二进制日志中记录的是潜在引起数据库发生改变的操作。要注意的是，通过二进制日志恢复的数据可能跟原始数据不一样，在多颗cpu并行工作的情况下，会同时执行多个事务，如果mysql的隔离级别较低，事务之间可能交叉执行(互相影响)，当前能够被使用的二进制日志只有一个，写入二进制日志的方式是串行写入，而事务是并行执行的，事务执行的次序和记录在二进制日志中的次序可能不一致。
 *

# **Mysql隔离级别：(由低到高)** #

*  READ-UNCOMMITTED
 *  READ-COMMITTED
 *  REPEATABLE-READ(缺省隔离级别)
 *  SERIALIZABLE
 *  如果你的mysql隔离级别是REPEATABLE-READ，二进制日志格式是statement，在某些场景下绝对会出现通过二进制日志恢复的数据和原始数据不一致的情况。
 *  如果你的mysql隔离级别是READ-COMMITED，二进制日志格式推荐row

# **主从复制原理** #

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 49][]

# **主从复制模式** #

*  mysql支持一主多从
 *  同步: 确保event发送到所有的slave
 *  半同步:  只要本地event写入本地的二进制日志文件中即可，但是不确保event一定发送到slave，它是不管的
 *  异步: 确保event发送到其中一个slave
 *  注：mysql 5.5 之前是不支持半同步的(google贡献的mysql半同步补丁)

# **多级复制** #

*  ### **一个从可以是某个主的从，也可以是某个从的从。** ###

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 50][]

### **中继日志(relay log)不能发送给其它节点** ###

*  复制的作用：

实现备份

高可用

异地容灾

分摊负载(scale out)

# **Mysql一主多从、读写分离架构** #

![0272d95f65c6d13b1de324506085342b.png][]

*  分析：这种架构随着mysql从服务器的增加会消耗mysql主服务器的性能(cpu、IO、内存)，因为从服务器直接接受二进制日志中的event。有几个从服务器接受主服务器发送的event，相应地mysql主服务器就要启几个线程，这些mysql线程各自独立地从二进制日志中读取数据，读完后发送给对应的mysql从服务器，所以下面引入新架构。

# **Mysql一主多从、读写分离、多级复制架构** #

![cc06c92a097e30b532ec7a1e18a69624.png][]

*  分析："主的从，从的主" mysql server实际上它只是起把二进制日志的event从主服务器发送到从服务器的中间件而已，实在没有必要把数据持久化存储下来，浪费IO。但是从中继日志中读取的event不在本地执行写入数据文件是不会记录到二进制日志文件中的，没有二进制日志就不能发送event给从服务器了。
 *  解决思路:

mysql有种存储引擎叫black hole，功能类似于linux的/dev/null，"主的从，从的主" mysql 数据库使用black hole存储引擎，这样从中继日志中读取的event在本地执行完后，数据并没有保存下来。

*  mysql实际上支持双主模型
 *  双主模型可以减轻读操作，但是无法减轻写操作,所有在第一个节点的写操作，第二个节点也同样要执行一遍，不然就出现数据不一致了。
 *  ### **一般来说，在生产环境中绝对不建议使用双主模型！** ###

# **Mysql集群规模扩大** #

*  当一个服务器承受的压力过大的时候，两种方式提升它的性能：
 *  scale on：纵向扩展，增加单台服务器的性能
 *  scale out: 横向扩展，增加服务器分摊负载
 *  当规模越来越大的时候，我们的主服务器怎么都无法承担写操作的时候，怎么办？
 *  数据库服务器之所以压力大，那是因为库里面有很多张表，每个表可能都需要读写操作；双主也无法减轻写操作，需要垂直拆分(分库)，就是将一个大的数据库拆分成n个小的数据库，把那些查询(联合查询)或操作的时候相关联的表放在一起，每一个小的数据库放在一个物理服务器上；
 *  当需要对某张表操作的时候，我们只需要联系这张表所在的数据库，但是垂直拆分治标不治本，数据库的数据也是有热区的，比如说我们有50G的数据，其中有2G的数据最繁忙，而这2G的数据都在同一张表上，这时候就需要水平拆分(分表)了，分表的目的就是把热区数据分开

![b1fbbc5c7298833314b59e84a02dbd42.png][]

*  **注：拆分是根据业务来拆的，不了解业务是不行的。**
 *  **一般来说，能不拆尽量不拆，一旦出现问题，trouble shooting起来将变得很困难。**

![f42b21478a24555bedef2a41b66898bf.png][]

[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70]: /images/20221005/553e51c7c16547aeb64d1447f44e9177.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 1]: /images/20221005/7d5ca28d70cd41f7ab8b8e8b1caaee64.png
[20210611082152606.png]: /images/20221005/0eaeafdfd98b487abfa4439a3107a0dc.png
[20210611082207814.png]: /images/20221005/bde252f5bda742a2a7bcca0d25d0722c.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 2]: /images/20221005/18dd397911d343bbb3d79dcda6cd614e.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 3]: /images/20221005/e0428b63a3db4f26b420ad46f7033662.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 4]: /images/20221005/10737197a93a4b5aa89bdf3ca3372d1e.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 5]: /images/20221005/7a33a9be92ab4290afbfd499076eab47.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 6]: /images/20221005/761d4f8f0778416685c7706fdd452345.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 7]: /images/20221005/6ae28b543dab43a1b73111366338d5d4.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 8]: /images/20221005/faf8b678572a4dc598511ffa681cd8c5.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 9]: /images/20221005/685dcdb11ab742a2950da4d03f81d1f7.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 10]: /images/20221005/599e621f7db7489cb480dfc5948e91a2.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 11]: /images/20221005/1d3a10b3eab544a193f12bc70fe18cad.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 12]: /images/20221005/941b0ae183684e2a911f2d887db124c9.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 13]: /images/20221005/853f06d1910444d3b0d3f2b24c235f14.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 14]: /images/20221005/b3d96fae6e7c412e832902ee36091a1d.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 15]: /images/20221005/a5f789d02aef44cd88b7a81d56cfcac3.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 16]: /images/20221005/5d42fb069f56414897705f7811156406.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 17]: /images/20221005/130a87692b534d0f88a3ab989fab9cd3.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 18]: /images/20221005/2a4773287b5c49a59b3b4955168de9cb.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 19]: /images/20221005/616506850a824d428e427782ff36c17a.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 20]: /images/20221005/dd35a3827bf8474d9620d0792453e22f.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 21]: /images/20221005/87befa7f53ad4794a58b9f3478b502b1.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 22]: /images/20221005/891d997b0f204dfc808dc7afc8b77c80.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 23]: /images/20221005/37459105e43a4a4e9de6f2e580fc7377.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 24]: /images/20221005/a469c95db8ab499280c46d56e69f3e08.png
[20210611093417824.png]: /images/20221005/d4a18189de654d75b8a884b728d01e61.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 25]: /images/20221005/d6f0e8652d9d4262b05c7cb1ddface89.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 26]: /images/20221005/8722441045ac4d6a9e27191193926d1b.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 27]: /images/20221005/031135adb9204375b7cde4bc37a86a3d.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 28]: /images/20221005/d63d93e701664de58e1fb73aeb911466.png
[2021061109533260.png]: /images/20221005/107c964b11e34c039e80ae8857f50aca.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 29]: /images/20221005/8a53302224884f11889b0ea431d26703.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 30]: /images/20221005/6435d3169fee495795b8944a3b909fdb.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 31]: /images/20221005/5de428ad165c40e3ab6fb523ccb5298a.png
[https_blog.csdn.net_gaofei0428_article_details_117503469_spm_1001.2014.3001.5501]: https://blog.csdn.net/gaofei0428/article/details/117503469?spm=1001.2014.3001.5501
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 32]: /images/20221005/cb3cd507ceb04340b8afb4666f46c605.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 33]: /images/20221005/4326d47c5f5e4a769c9184e94b68d89e.png
[202106111041436.png]: /images/20221005/83728c49c9d04a6fbac84bcd77f3b5f6.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 34]: /images/20221005/d7c29f53b3424de8b02faaec47087d31.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 35]: /images/20221005/1af10cda0cc5443682c079a1310783f4.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 36]: /images/20221005/21127d54cc3240b1a25471d5d2b84a6e.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 37]: /images/20221005/41da436d30004591b56932d286ff75f0.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 38]: /images/20221005/1aa1ef6bf68a431db87730dec8cf47ad.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 39]: /images/20221005/b3d3d127710e4e85b13da5d28ff04ffb.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 40]: /images/20221005/7a2d1e53c9cf4e86bbc5bf39779f8676.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 41]: /images/20221005/6b08957f0d7549f2a156efba08808d6b.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 42]: /images/20221005/a46dc53ab7cd46cc853a42b59186ac2b.png
[20210615213707101.png]: /images/20221005/19c5204238744f0bb47cf2db4e87ed0c.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 43]: /images/20221005/afd42be849aa40499a073c743bcfc2e1.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 44]: /images/20221005/b9feb330f8024f7ebe8ab573ab8737d8.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 45]: /images/20221005/9a41a9f5945f4072ab660c7a07f72155.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 46]: /images/20221005/44a801765ae046868835974f515b3a71.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 47]: /images/20221005/ce6047d1c713416fa95ee2131a7efe97.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 48]: /images/20221005/6dd9d3dec9064b5ca550cda12f8be8f5.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 49]: /images/20221005/4f53632dfa344de49088dac97fb9c965.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dhb2ZlaTA0Mjg_size_16_color_FFFFFF_t_70 50]: /images/20221005/59063a0c12554aa4b074a710b743c365.png
[0272d95f65c6d13b1de324506085342b.png]: /images/20221005/57085cc8484b406b8f6cd4aa9c95d53e.png
[cc06c92a097e30b532ec7a1e18a69624.png]: /images/20221005/c791797cf2324725b9235c98812805de.png
[b1fbbc5c7298833314b59e84a02dbd42.png]: /images/20221005/c363078ffd674f829661995baa18eff4.png
[f42b21478a24555bedef2a41b66898bf.png]: /images/20221005/2dce71e9e85c403ab6a4db58915a8d51.png