mysqlcdc_简单理解什么是数据库CDC?(以mysql为例)⼀、数据库CDC是什么
CDC 是change data capture,即变化数据捕捉。是数据库进⾏备份的⼀种⽅式,常⽤于⼤量数据的备份⼯作。分为⼊侵式的和⾮⼊侵式的备份⽅法,⼊侵式的有基于触发器备份、基于时间戳备份、基于快照备份,⾮⼊侵式的备份⽅法是基于⽇志的备份。mysql 基于⽇志的CDC就是要开启mysql binary log。
⼆、Mysql基于⽇志的CDC配置
1、查看mysql是否开启Binlog
show variables like 'log_bin';
若变量log_bin的值为“OFF”,则说明Binlog未开启,继续执⾏下⼀步。
若变量log_bin的值为“ON”,则说明Binlog已开启,继续执⾏以下SQL命令,检查相关参数的配置是否符合要求。
show variables like '%binlog_format%';
show variables like '%binlog_row_image%';
变量binlog_format的值应该为“ROW”,变量binlog_row_image的值应该为“FULL”。
2、执⾏以下命令编辑MySQL配置⽂件,然后按“i”进⼊输⼊模式。
vi /etc/myf
在配置⽂件中增加如下配置,开启Binlog。
server-id = 123
log_bin = mysql-bin
binlog_format = row
binlog_row_image = full
expire_logs_days = 10
mysql数据库的方法gtid_mode = on
enforce_gtid_consistency = on
其中:
server-id的值应为⼤于1的整数,请根据实际规划设置,并且在创建数据集成任务时设置的“Server Id”值需要此处设置的值不同。
expire_logs_days为Binlog⽇志⽂件保留时间,超过保留时间的Binlog⽇志会被⾃动删除,应保留⾄少2天的⽇志⽂件。
“gtid_mode = on”和“enforce_gtid_consistency = on”仅当MySQL的版本⼤于等于5.6.5时才需要添加,否则删除这两⾏内容。
按“Esc”退出输⼊模式,然后输⼊“:wq”并回车,保存退出。
执⾏以下命令重启MySQL数据库。
service mysqld restart
以root⽤户登录数据库,执⾏以下命令,查询变量log_bin的值是否为“ON”,即是否已开启Binlog。
show variables like 'log_bin';
3、在数据库中执⾏以下命令创建ROMA连接数据库的⽤户并配置权限。
CREATE USER 'roma'@'%' IDENTIFIED BY 'password';
GRANT SELECT, RELOAD, SHOW DATABASES, REPLICATION SLAVE, REPLICATION CLIENT ON *.* TO 'roma'@'%';其中:
roma为ROMA连接⽤户名,请根据实际规划设置。
password为ROMA连接⽤户密码,请根据实际规划设置。

版权声明:本站内容均来自互联网,仅供演示用,请勿用于商业和其他非法用途。如果侵犯了您的权益请与我们联系QQ:729038198,我们将在24小时内删除。