canal mysql从库_采用Canal监听mysql数据库变化

以你之姓@ 2023-01-10 05:16 163阅读 0赞

注意：填写进 instance.properties 的master ip 是数据库的ip

select SUBSTRING\_INDEX(host,':',1) as ip , count(\*) from information\_schema.processlist group by ip;

1》docker中安装mysql容器

开启binlog模式

修改/etc/mysql/mysql.conf.d/mysqld.cnf

docker exec -it mysql /bin/bash

cd /etc/mysql/mysql.conf.d

vi mysqld.cnf

添加这两行

![f9df3e5fe5a860ea3384987a9c980da9.png][]

2》创建用于同步的账号并授权

采用root账号登录

mysql -uroot -p123456

create user canal@'%' IDENTIFIED by 'canal';

GRANT SELECT, REPLICATION SLAVE, REPLICATION CLIENT,SUPER ON \*.\* TO 'canal'@'%';

FLUSH PRIVILEGES;

![b75ce820502b917befc1e7175fa3724e.png][]

3》重启mysql容器

docker restart mysql

4》docker中安装canal

docker pull docker.io/canal/canal-server

docker run -p 11111:11111 --name canal -d docker.io/canal/canal-server

docker exec -it canal /bin/bash

cd canal-server/conf/

vi canal.properties

cd example/

vi instance.properties

canal.properties的配置只要保证 canal.id 和master数据库中的serverid不重复

![7960c92cec40fb67f030e9b025bc6f2c.png][]

instance.properties

要配置master的地址 canal.instance.master.address

用于同步的账号 canal.instance.dbUsername

用于同步的密码 canal.instance.dbPassword

需要监听哪些表的正则过滤 canal.instance.filter.regex

canal的实例名称 canal.mq.topic

由于mysql主数据库是用docker安装的，这里master的地址要填写mysql容器的地址，先进入mysql容器，再查看ip就可以。

![65ef8d471c195caee78446f4fdce5558.png][]

![f0275e060a531bf9c93ce793066b4e62.png][]

canal.instance.filter.regex = .\*\\\\..\*    表示所有的表

canal.mq.topic 配置的实例表示微服务中要监听相同实例

docker update --restart=always canal

docker restart canal

[f9df3e5fe5a860ea3384987a9c980da9.png]: /images/20221119/63b5fff2075140419eb3c71141ad4e09.png
[b75ce820502b917befc1e7175fa3724e.png]: /images/20221119/1040d962fe364101b6647f6725cd1fb7.png
[7960c92cec40fb67f030e9b025bc6f2c.png]: /images/20221119/2399eeae77e14413b8ce1dfba0ba5f95.png
[65ef8d471c195caee78446f4fdce5558.png]: /images/20221119/340e84b3f4ce4d51850ea2d736abab33.png
[f0275e060a531bf9c93ce793066b4e62.png]: /images/20221119/f4b451257e31461aafd80b0946550e7b.png

发表评论取消回复

表情：

评论列表（有 0 条评论，163人围观）

还没有评论，来说两句吧...

相关阅读

相关 canal快速监听数据库变化-docker版

目录一、拉取镜像二、运行镜像三、可能会出现的问题：镜像容器自动停止。四、进入canal容器（目的是拷贝配置文件到宿主主机）五、拷贝canal配置文件六、

太过爱你忘了你带给我的痛/ 2024年03月24日 09:59/ 0 赞/ 48 阅读

相关 canal监听mysql实践

canal监听mysql实践 canal是用java开发的基于数据库增量日志解析，提供增量数据订阅&消费的中间件。目前，canal主要支持了MySQL的binlog解析

梦里梦外;/ 2023年10月03日 21:33/ 0 赞/ 22 阅读

相关 canal监听mysql实践

![format_png][] canal监听mysql实践 canal是用java开发的基于数据库增量日志解析，提供增量数据订阅&消费的中间件。目前，canal主要

ゝ一纸荒年。/ 2023年09月23日 15:23/ 0 赞/ 145 阅读

相关 canal监控mysql数据库数据变化的巨坑！！

原理：canal监控mysql的数据库数据变化是根据数据库的binlog来监控的。 -------------------- 问题描述: 使用canal监控mysql

超、凢脫俗/ 2023年02月19日 06:27/ 0 赞/ 20 阅读

相关 mysql主从和canal_MySQL协议和canal实现

前言前面的文章里，我们了解到 canal 可以从 MySQL 中感知数据的变化。这是因为它模拟 MySQL slave 的交互协议，伪装自己为 MySQL slave ，从

我就是我/ 2023年01月11日 13:24/ 0 赞/ 167 阅读

相关 canal mysql从库_采用Canal监听mysql数据库变化

注意：填写进 instance.properties 的master ip 是数据库的ip select SUBSTRING\_INDEX(host,':',1) as ip

以你之姓@/ 2023年01月10日 05:16/ 0 赞/ 164 阅读

相关 canal监控mysql变化的问题-NoNode for /otter/canal/destinations/example/cluster

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3UwMTEx

青旅半醒/ 2022年12月13日 12:52/ 0 赞/ 152 阅读

相关 canal监听mysql的增删改操作

canal监听mysql的增删改操作 1.安装mysql-5.7.24 (1)安装过程省略 (2)修改配置文件my.cnf, 开启mysql的binlog功

太过爱你忘了你带给我的痛/ 2022年11月27日 08:56/ 0 赞/ 408 阅读

相关 canal+mysql+kafka（canal监控mysql的binlog，把数据变化写入到kafka中）

[https://www.cnblogs.com/throwable/p/12483983.html][https_www.cnblogs.com_throwable_p_12

短命女/ 2022年10月07日 10:58/ 0 赞/ 223 阅读

相关 Canal监听binlog

MySQL binlog MySQL主从复制 mysql服务端修改配置并重启 <table> <tbody> <tr> <td> <pre>1

小灰灰/ 2022年05月15日 13:54/ 0 赞/ 330 阅读