MySQL实现主从复制的原理详解

 更新时间:2023年07月02日 16:18:45   作者:DannyIdea  
这篇文章主要为大家介绍了MySQL的主从复制是怎么实现的,文中有相关的图文介绍和代码示例,具有一定的参考价值,感兴趣的同学跟着小编一起来学习吧

主从复制是怎么实现的呢?

当MySQL数据库发生写操作的时候会记录下binlog,它是一种逻辑日志。有了这个 binlog,从服务器会获取主服务器的 binlog 文件,然后解析里面的 SQL 语句,在从服务器上面执行一遍,保持主从的数据一致。

这里面涉及到三个线程:

IO线程

连接到 master 获取 binlog,并且解析 binlog 写入中继日志,这个线程叫做 I/O 线程。

log dump线程

master 节点上有一个 log dump 线程,是用来发送 binlog 给 slave 的。 

sql线程

从库的 sql 线程,是用来读取 relay log,把数据写入到数据库的。

主从复制的方式

异步复制

在异步复制中,主库执行完操作后,写入binlog日志后,就返回客户端,这一动作就结束了,并不会验证从库有没有收到,完不完整,所以这样可能会造成数据的不一致。

说到底,复制过程中数据是否一致,主要取决于Binlog日志的安全性与完整性

在MySQL中,有sync_binlog=n这一参数,他的值表示每进行n次事务提交,MySQL就将Binlog刷新到磁盘。如果这个值为1,就代表每提交一次事务(SQL),就将Binlog往磁盘刷新一次,这样一来,就算数据库宕机了,那么最多只能损失一次事务的数据。

但是,一旦多个事务并发提交时,由于受sync_binlog的限制,MySQL只能按顺序来处理这些请求,另外,高频率的刷新binlog对IO的影响也很大,进一步影响了数据库的性能,所以,一般这个值都设为0或者其他值,在数据的安全性和高并发下的性能之间取得一个平衡。

为了更加有效的保护Binlog的安全性和完整性,MySQL5 .5之后引入了半同步复制

半同步复制

在异步复制中,我们遇到的一个主要问题就是,在复制过程当中,主库不会去验证Binlog有没有成功复制到从库,那如果主库提交一个事务并写入Binlog中后,当从库还没有从主库得到Binlog时,主库宕机了或因磁盘损坏等故障导致该事务的Binlog丢失了,那从库就不会得到这个事务,也就造成了主从数据的不一致。

而半同步复制,当主库每提交一个事务后,不会立即返回,而是等待其中一个从库接收到Binlog并成功写入Relay-log中才返回客户端,所以这样就保证了一个事务至少有两份日志,一份保存在主库的Binlog,另一份保存在其中一个从库的Relay-log中,从而保证了数据的安全性和一致性。

另外,在半同步复制时,如果主库的一个事务提交成功了,在推送到从库的过程当中,从库宕机了或网络故障,导致从库并没有接收到这个事务的Binlog,此时主库会等待一段时间(这个时间由rpl_semi_sync_master_timeout的毫秒数决定),如果这个时间过后还无法推送到从库,那MySQL会自动从半同步复制切换为异步复制,当从库恢复正常连接到主库后,主库又会自动切换回半同步复制。

半同步复制的“半”体现在,虽然主从库的Binlog是同步的,但主库不会等待从库执行完Relay-log后才返回,而是确认从库接收到Binlog,达到主从Binlog同步的目的后就返回了,所以从库的数据对于主库来说还是有延时的,这个延时就是从库执行Relay-log的时间。所以只能称为半同步。

总之这两种策略,可以浓缩理解为,一个是“不管不问”,一个是“确认到位就跑”。

读写分离

做了主从复制的方案之后,我们只把数据写入 master 节点,而读的请求可以分担到slave 节点, 这种方案我们称之为读写分离。

读写分离可以一定程度低减轻数据库服务器的访问压力,但是需要特别注意主从数据一致性的问题。

我们在做了主从复制之后,如果单个 master 节点或者单张表存储的数据过大的时候,比如一张表有上亿的数据,单表的查询性能还是会下降,我们要进一步对单台数据库节点的数据进行拆分,而这个拆分就是分库分表。

常见的分库分表策略

垂直分库

把一个数据库按照业务拆分成不同的数据库:

水平分库分表

把单张表的数据按照一定的规则分布到多个数据库。

到此这篇关于MySQL实现主从复制的原理详解的文章就介绍到这了,更多相关MySQL 主从复制内容请搜索脚本之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持脚本之家!

相关文章

  • mysql 5.7.17 安装配置方法图文教程(CentOS7)

    mysql 5.7.17 安装配置方法图文教程(CentOS7)

    这篇文章主要为大家详细介绍了CentOS7下mysql 5.7.17 安装配置方法图文教程,感兴趣的小伙伴们可以参考一下
    2016-12-12
  • MySQL中SQL Mode的查看与设置详解

    MySQL中SQL Mode的查看与设置详解

    在本篇文章里小编给各位分享的是关于MySQL中SQL Mode的查看与设置详解内容,需要的朋友们可以参考下。
    2020-03-03
  • MySQL处理重复数据的各种技术和方法(预防、检测与删除)

    MySQL处理重复数据的各种技术和方法(预防、检测与删除)

    这篇文章主要介绍了MySQL中处理重复数据的技术和方法,包括重复数据的产生原因、影响、预防方案、删除方案(临时表法、直接删除法、窗口函数)以及高级应用场景和性能优化建议,需要的朋友可以参考下
    2025-11-11
  • 实例操作MySQL短链接

    实例操作MySQL短链接

    在本文里我们给大家总结了关于MySQL短链接的实操方法和相关知识点,有需要的朋友们跟着学习下。
    2019-03-03
  • MySQL使用show processlist命令的实现

    MySQL使用show processlist命令的实现

    本文详细解析了MySQL的showprocesslist命令,包括其功能、返回参数、Command值和State值的含义,及利用它来诊断和优化高CPU或iowait问题,感兴趣的可以了解一下
    2025-10-10
  • 深入理解 MySQL 锁机制之全局锁、表锁与行锁深度解析

    深入理解 MySQL 锁机制之全局锁、表锁与行锁深度解析

    MySQL 作为主流关系型数据库,其锁机制设计尤为关键,本文将围绕全局锁、表锁、行锁 三种锁类型,深入剖析其原理、使用场景与注意事项,帮助你更好地理解并优化数据库并发性能,感兴趣的朋友跟随小编一起看看吧
    2025-10-10
  • Mysql安装与卸载、Navicat工具的使用详细教程

    Mysql安装与卸载、Navicat工具的使用详细教程

    Navicat是一套快速、可靠和全面的数据库管理工具,专门用于简化数据库管理和降低管理成本,这篇文章主要介绍了Mysql安装与卸载、Navicat工具使用的相关资料,文中通过代码介绍的非常详细,需要的朋友可以参考下
    2025-11-11
  • MySQL获取行号的示例代码

    MySQL获取行号的示例代码

    MySQL变量是一种用于存储和操纵数据的数据类型,通过在SQL查询中使用变量,我们可以创建一个MySQL查询,用于获取每行数据的行号,这篇文章主要介绍了MySQL 如何获取行号,需要的朋友可以参考下
    2023-08-08
  • MySql InnoDB存储引擎之Buffer Pool运行原理讲解

    MySql InnoDB存储引擎之Buffer Pool运行原理讲解

    缓冲池是用于存储InnoDB表,索引和其他辅助缓冲区的缓存数据的内存区域。缓冲池的大小对于系统性能很重要。更大的缓冲池可以减少磁盘I/O来多次访问同一表数据。在专用数据库服务器上,可以将缓冲池大小设置为计算机物理内存大小的百分之80
    2023-01-01
  • MySQL长字符截断的实现示例

    MySQL长字符截断的实现示例

    本文主要介绍了MySQL长字符截断的实现示例,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧
    2023-03-03

最新评论