MySQL的Flush-List和脏页的落盘机制
一、回顾
MySQL启动后Buffer Pool会初始化。Buffer Pool也会初始化好N多个空白的缓存页，以及它们的描述数据会被组织成LRU链表以及FreeList 双向链表。
这时你从磁盘中读取一个数据页，会先从Free List中找出一个空闲缓存页的描述信息，然后将你读出的数据页中加载进缓存页中。同时将缓存页的描述信息从Free List中剔除，此外该描述信息块还会被维护进LRU链表中。
数据页被加载进Buffer Pool后你就可以对其进行变更操作了。
二、Flush List
为了加快响应客户端的速度，MySQL会在Buffer Pool中对数据进行修改，可是一旦你对LRU链表中的缓存页做了修改，那该页中的数据和磁盘中的数据页信息就不一致了！大家一般管这种数据页叫做脏页。
为了保证数据的最终一致性，MySQL是需要将脏页刷新回磁盘的！
但是问题是：需要将哪些数据页刷新回磁盘呢？
这就引出了Flush List～
Flush List 和 Free List很像，都是由Buffer Pool中数据描述信息组织而成的双向链表。
一旦你对内存中的缓冲页作出了修改，那该缓冲页对应的描述信息块就会添加进 Flush List。这样当Buffer Pool中的数据页不够用时，我们就可以优先将 Flush List中的脏数据页刷新进磁盘中。
如果你读了前几篇文章那你肯定知道了 LRUList、FreeList、FlushList、Buffer Pool、脏页、脏数据。
下面乘胜追击！一起看一下脏页的落盘机制
三、什么是脏页？什么是脏数据？
什么是脏页？
我在介绍Flush List 的那篇文章有提及，脏页就是LRU链表中被修改了的缓存页。他们和磁盘中的数据页不一致，脏页是需要被刷新回磁盘的。
什么是脏数据？
这个问题其实引出了脏读的概念。举个例子：事物A中读取到了事物B中未提交的数据，我们管这些数据叫做脏数据。
四、脏页刷回磁盘的时机
当Buffer Pool不够用时，根据LRU机制，MySQL会将Old SubList部分的缓存页移出LRU链表。如果被移除出去的缓存页的描述信息在Flush List中，MySQL就得将其刷新回磁盘。
InnoDB存储引擎将脏页刷回磁盘的时机有蛮多的，你可以把它当作拓展知识大概浏览一下。
1、当MySQL数据库关闭时，会将所有的脏数据页刷新回磁盘。这个功能由参数：innodb_fast_shutdown=0控制，默认让InnoDB在关闭前将脏页刷回磁盘，以及清理掉undo log。
2、有一个后台线程Master Thread会按照每秒或者每十秒的速度，异步的将Buffer Pool中一定比例的页面刷新回磁盘中。
3、在MySQL5.7中，Buffer Pool的刷新由page cleaner threads完成。
我们可以通过innodb_page_cleaners参数控制page cleaner threads线程的数量，但是当你将这个数值调整的比Buffer Pool的数量还大时，MySQL会自动将 innodb_page_cleaners数量设置为innodb_buffer_pool_instances的数量。
Innodb1.1.x之前需要保证LRU列表中有至少100个空闲页可以使用。低于这个阈值就会触发脏页的刷新。
从MySQL5.6，也就是innodb1.2.X开始，innodb_lru_scan_depth参数为每个缓冲池实例指定page cleaner threads 扫描Buffer Pool来查找要刷新的脏页的下行距离。默认为1024，该后台线程每秒都会执行一次。
4、当脏数据页太多时，也会触发将脏数据页刷新回磁盘。该机制可由参数innodb_nax_dirty_pages_pct控制，比如将其设置为75，表示，当Buffer Pool中的脏数据页达到整体缓存的75%时，触发刷新的动作。现实情况是该参数默认值为0。以此来禁用Buffer Pool早期的刷新行为。
5、当redo log不可用时，也会强制脏页列表中的脏页刷新回磁盘。这个机制同样由一个后台线程完成。
五、其他关于脏页刷新的知识点
刷新临接数据页：意思是当MySQL将某脏页刷新回磁盘时，是否也以相同的态度将该脏页邻接的脏页一并刷新回磁盘。
可以通过参数innodb_flush_neighbors控制该过程。
- 设置为0时表示，禁用刷新邻接的功能。
- 设置为1时表示，以相同的态度刷新其邻接的脏页。
- 设置为2时表示，以相同的程度刷新脏页。
那如何选择将其设置为哪种状态呢？
你可以根据MySQL实例所在机器的存储类型来决定。如果为HDD存储建议将其开启，因为HDD的磁盘刷新速率较低，开启该参数后可以有效的减少IO操作。相反如果使用SSD存储，其本身就有高磁盘IO的特性，建议禁用该参数。
以上就是MySQL的Flush-List和脏页的落盘机制的详细内容，更多关于MySQL Flush-List和脏页的落盘机制的资料请关注脚本之家其它相关文章！
相关文章
MySQL数据库事务隔离级别介绍(Transaction Isolation Level)
这篇文章主要介绍了MySQL数据库事务隔离级别(Transaction Isolation Level) ,需要的朋友可以参考下2014-05-05
日常使用数据库查询语句时,单表查询尝尝不能满足项目的业务需求,在项目开发过程中,有很多需求都是要涉及到多表的连接查询,这篇文章主要给大家介绍了关于MySQL连接查询的相关资料,需要的朋友可以参考下2021-06-06
innodb_index_stats导入备份数据时报错表主键冲突的解决方法
下面小编就为大家带来一篇innodb_index_stats导入备份数据时报错表主键冲突的解决方法。小编觉得挺不错的，现在就分享给大家，也给大家做个参考。一起跟随小编过来看看吧2017-03-03
这篇文章从三种基于不同形式的分布式锁的实现，数据库、缓存和zookeeper，内容比较详细，具有一定参考价值，需要的朋友可以了解下。2017-10-10
使用Python的Django框架中的压缩组件Django Compressor
这篇文章主要介绍了使用Python的Django框架中的压缩组件Django Compressor,这个工具主要用于实现js/css的压缩,需要的朋友可以参考下2015-05-05
数据库管理系统(DataBase Management System)是用来创建数据库和管理数据库数据的一个管理软件，我们口头说的MySQL数据库就是这个管理系统，这篇文章主要介绍了MySQL从0到1打开数据库管理,需要的朋友可以参考下2023-06-06
这篇文章主要给大家介绍了利用MySQL统计一列中不同值的数量的几种解决方法，每种方法都给了详细的示例代码供大家参考学习，相信对大家具有一定的参考价值，需要的朋友们下面跟随小编一起来看看吧。2017-04-04
MySQL 为了数据库的安全性默认在链接中断或者错误时记录错误链接的ip 等信息（host_cache），有点像系统的错误日志的一种机制，这篇文章主要介绍了MySQL数据库链接超时报1129错误解决办法,需要的朋友可以参考下2022-10-10
这篇文章主要介绍了MySQL curdate()函数的实例详解的相关资料,希望通过本文能帮助到大家理解应用MysqL curdate()的使用方法，需要的朋友可以参考下2017-09-09
MGR是MySQL数据库未来发展的一个重要方向，本文重点给大家介绍MGR集群搭建过程分析，对MGR集群搭建相关知识感兴趣的朋友一起看看吧2022-02-02
最新评论