MYSQL主库切换binlog模式后主从同步错误的解决方案

 更新时间:2024年08月07日 10:11:44   作者:LOVE_DDZ  
在使用FlinkSQL的mysql-cdc连接器来监听MySQL数据库时,通常需要将MySQL的binlog模式设置为ROW模式,当我们将MySQL主库的binlog模式从STATEMENT切换为ROW并重启MySQL服务后,MySQL从库在同步时可能会报错,所以本文介绍了MYSQL主库切换binlog模式后主从同步错误的解决方案

在使用FlinkSQL的mysql-cdc连接器来监听MySQL数据库时,通常需要将MySQL的binlog模式设置为ROW模式。然而,在实际项目中,可能会遇到如下问题:

当我们将MySQL主库的binlog模式从STATEMENT切换为ROW并重启MySQL服务后,MySQL从库在同步时可能会报错,错误信息如下:

Could not execute Update_rows event on table ddz.ddz_mlfl; 
Can't find record in 'ddz_mlfl', Error_code: 1032; handler error HA_ERR_KEY_NOT_FOUND; 
the event's master log ddzmysql-bin.002729, end_log_pos 801362189

这个错误表示在执行Update_rows事件时,找不到目标记录,具体错误代码为1032,对应的处理器错误为HA_ERR_KEY_NOT_FOUND。这是因为在切换binlog模式后,主从库之间的数据可能不一致。

错误原因分析

MySQL主库的binlog模式分为STATEMENT、ROW和MIXED三种:

  • STATEMENT模式:记录的是每一条SQL语句。
  • ROW模式:记录的是每一行数据的变更。
  • MIXED模式:结合了STATEMENT和ROW模式,通常根据具体情况自动选择。

在从STATEMENT模式切换到ROW模式时,可能会因为以下原因导致从库同步失败:

  1. 数据不一致:在切换binlog模式并重启主库后,主库和从库之间可能存在数据不一致的情况。ROW模式下,每一行的变化都会记录在binlog中,而STATEMENT模式下则只记录SQL语句的执行。因此,切换模式后,从库在应用ROW格式的binlog事件时,可能找不到相应的记录。
  2. 日志不一致:STATEMENT模式和ROW模式记录的日志格式不同,切换模式后可能会导致日志解析错误。
  3. 从库延迟:从库在同步主库的数据时,可能会出现延迟。如果在切换模式的过程中,主库进行了大量数据修改操作,从库未能及时同步,导致数据不一致。
  4. 应用binlog事件失败:从库在应用ROW格式的binlog事件时,可能因为某些原因(如主键冲突、索引问题等)而无法正确应用,从而导致找不到记录的错误。

解决方案

为了解决上述问题,可以按照以下步骤操作:

1. 确保主从库数据一致

在切换binlog模式之前,确保主从库数据完全一致,可以通过以下方式操作:

  • 停止写操作:在切换模式前,停止所有写操作,确保数据不再变化。
  • 完全同步:确保主库的所有数据已经完全同步到从库,执行以下命令检查同步状态:
SHOW SLAVE STATUS;

2. 切换binlog模式

在确保数据一致后,按照以下步骤切换binlog模式:

停止从库同步

STOP SLAVE;

切换主库binlog模式

SET GLOBAL binlog_format = 'ROW';

重启MySQL主库,以确保配置生效:

service mysql restart

启动从库同步

START SLAVE;

3. 重建从库

如果在切换模式后依然报错,建议重建从库:

停止从库

STOP SLAVE;

重新备份主库数据,并导入到从库:

mysqldump -u root -p --all-databases --single-transaction --master-data > backup.sql
mysql -u root -p < backup.sql

重新配置从库同步,确保从库的master_log_filemaster_log_pos与主库一致:

CHANGE MASTER TO MASTER_HOST='master_ip',
MASTER_USER='replication_user', 
MASTER_PASSWORD='replication_user_password',
MASTER_LOG_FILE='recorded_log_file', 
MASTER_LOG_POS=recorded_log_position;
START SLAVE;

4. 跳过异常错误

跳过报错是以上方法都解决不了不得已使用的。

跳过指定错误代码在从服务器,编辑 /etc/my.cnf:

 [mysqld]
 slave-skip-errors=1032,1033

跳过所有错误在从服务器,编辑 /etc/my.cnf:

 [mysqld]
 slave-skip-errors=all

重启mysql从库服务

service mysqld restart

总结

在使用FlinkSQL的mysql-cdc连接器监听MySQL数据库时,确保binlog模式为ROW是必要的。但在切换binlog模式时,需要特别注意主从库的数据一致性和同步状态。

以上就是MYSQL主库切换binlog模式后主从同步错误的解决方案的详细内容,更多关于MYSQL切换binlog主从同步错误的资料请关注脚本之家其它相关文章!

相关文章

  • 简单谈谈mysql左连接内连接

    简单谈谈mysql左连接内连接

    这篇文章主要给大家介绍了关于mysql左连接内连接的相关资料,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧
    2021-01-01
  • 正确使用MySQL update语句

    正确使用MySQL update语句

    今天我们主要向大家讲述的是MySQL update 语句的实际用法,以及在实际操作中哪些相关的操作步骤是值得我们大家注意的。
    2015-08-08
  • MySQL中的视图特性和用户权限管理详解

    MySQL中的视图特性和用户权限管理详解

    文章详细介绍了MySQL视图和用户管理与权限控制,本文结合实例代码给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友参考下吧
    2026-05-05
  • MySQL启动报错:InnoDB表空间丢失问题及解决方法

    MySQL启动报错:InnoDB表空间丢失问题及解决方法

    在启动MySQL时,遇到了InnoDB: Tablespace 5975 was not found ,该错误表明MySQL在启动过程中无法找到指定的 sw_rtu_message_202408.ibd 表空间文件,导致InnoDB存储引擎无法继续操作,本文给大家详细介绍了解决方案,需要的朋友可以参考下
    2025-05-05
  • MySQL报错Lost connection to MySQL server during query的解决方案

    MySQL报错Lost connection to MySQL server&n

    在确保网络没有问题的情况下,服务器正常运行一段时间后,数据库抛出了异常"Lost connection to MySQL server during query",本文将给大家介绍MySQL报错Lost connection to MySQL server during query的解决方案,需要的朋友可以参考下
    2024-01-01
  • MySQL 中的 LIMIT 语句及基本用法

    MySQL 中的 LIMIT 语句及基本用法

    LIMIT 语句用于限制查询返回的行数,常用于分页查询或取部分数据,提高查询效率,本文给大家介绍MySQL 中的 LIMIT 语句,本文给大家介绍的非常详细,感兴趣的朋友一起看看吧
    2025-06-06
  • MySQL数据库自动化备份脚本的实践指南

    MySQL数据库自动化备份脚本的实践指南

    数据是企业的核心资产,定期备份数据库是每个运维和开发人员的必修课,本文分享一个生产环境验证过的 MySQL 自动备份脚本,支持多数据库备份、自动压缩、过期清理,并详细解读每一处细节,帮助你快速搭建可靠的备份体系,需要的朋友可以参考下
    2026-04-04
  • mysql技巧:提高插入数据(添加记录)的速度

    mysql技巧:提高插入数据(添加记录)的速度

    这篇文章主要介绍了mysql技巧:提高插入数据(添加记录)的速度,需要的朋友可以参考下
    2014-12-12
  • MySQL触发器基本用法详解【创建、查看、删除等】

    MySQL触发器基本用法详解【创建、查看、删除等】

    这篇文章主要介绍了MySQL触发器基本用法,结合实例形式分析了mysql触发器的基本创建、查看、删除等相关使用方法与注意事项,需要的朋友可以参考下
    2020-05-05
  • SQL Server携程核心系统无感迁移到MySQL实战

    SQL Server携程核心系统无感迁移到MySQL实战

    这篇文章主要介绍了SQL Server携程核心系统无感迁移到MySQL实战,文章通过基于数据库部署架构镜像构建了订单缓存统一管理热点数据,解决各端差异,具体详情需要的小伙伴可以参考下面文章详细内容
    2022-05-05

最新评论