Mycat + canal + otter

梦里梦外; 2022-05-16 10:16 173阅读 0赞

一、内容介绍  
一.mycat  
Mycat是一个开源的数据库中间件，是一个大数据库集群。  
支持事务、ACID、可以替代MySQL的加强版数据库。  
一个融合内存缓存技术、NoSQL技术、HDFS大数据的新型SQL Server  
![这里写图片描述][70]  
![这里写图片描述][70 1]  
mycat监控支持  
支持对mycat、mysql性能监控  
支持对mycat的jvm内存提供监控服务  
支持对线程的监控  
支持对操作系统CPU、内存、磁盘、网络的监控

二、canal  
mysql数据库binlog的增量订阅&消费组件  
支持的业务、  
1.数据库镜像  
2.数据库实时备份  
3. 多级索引 (卖家和买家各自分库索引)  
4. search build  
5.业务cache刷新  
6.价格变化等重要业务消息  
Mysql 主备复制的实现  
1.master将改变记录极度到二进制日志（binary log） 中，可以通过show binlog events进行查看  
2.slave将master的binary log events拷贝到它的中继日志（relay log）;  
3.slave重做中继日志中的时间，将改变反映它自己的数据。  
![这里写图片描述][70 2]  
canal的工作原理  
1.cancel模拟mysql slave的交互协议，伪装自己为mysql slave，向 mysql master发送 dump。  
2.mysql master收到dump请求，开始推送binary log给slave (也就是canal)  
3.canal解析binary log对象  
![这里写图片描述][70 3]  
三、otter  
基于数据库增量日志解析，准实时同步到本机房或异地机房的mysql/oracle数据库. 一个分布式数据库同步系统  
1.基于canal 开源产品，获取数据库增量日志数据。  
2.典型管理系统架构，manager（web管理）+node（工作节点）  
a.manager运行时推送同步配置到node节点  
b.node节点将同步状态反馈到manager上  
3.基于zookeeper，解决分布式状态调度的，允许多node节点之前协同工作。

![这里写图片描述][70 4]

[70]: /images/20220516/fd0bdda17639429898e8a5d932c8d392.png
[70 1]: /images/20220516/a29f7c6f05b646dbba811720abea833f.png
[70 2]: /images/20220516/6a035413324743469028d110b772bdda.png
[70 3]: /images/20220516/b95dd2f19f2e4b30872ec97e767c18e2.png
[70 4]: /images/20220516/37d26ab574e14dff8c91f6088798a32a.png