Mysql的刷脏页问题

- 日理万妓 2022-01-10 16:35 165阅读 0赞

平时的工作中，不知道你有没有遇到过这样的场景，一条 SQL 语句，正常执行的时候特别快，但是有时也不知道怎么回事，它就会变得特别慢，并且这样的场景很难复现，它不只随机，而且持续时间还很短。

当内存数据页跟磁盘数据页内容不一致的时候，我们称这个内存页为“脏页”。内存数据写入到磁盘后，内存和磁盘上的数据页的内容就一致了，称为“干净页”。

平时执行很快的更新操作，其实就是在写内存和日志，而 MySQL 偶尔“抖”一下的那个瞬间，可能就是在刷脏页（flush）。

**那么，什么情况会引发数据库的 flush 过程呢？**

第一种场景是InnoDB 的 redo log 写满了，这时候系统会停止所有更新操作，把 checkpoint 往前推进，redo log 留出空间可以继续写。

第二种场景对应的就是系统内存不足。当需要新的内存页，而内存不够用的时候，就要淘汰一些数据页，空出内存给别的数据页使用。如果淘汰的是“脏页”，就要先将脏页写到磁盘。

第三种场景对应的就是 MySQL 认为系统“空闲”的时候。当然，MySQL忙起来可是会很快就能把redo log 记满的，所以要合理地安排时间，即使是忙的时候，也要见缝插针地找时间，只要有机会就刷一点“脏页”。

第四种场景对应的就是 MySQL 正常关闭的情况。这时候，MySQL 会把内存的脏页都 flush 到磁盘上，这样下次 MySQL 启动的时候，就可以直接从磁盘上读数据，启动速度会很快。

接下来，你可以分析一下上面四种场景对性能的影响。

其中，第三种情况是属于 MySQL 空闲时的操作，这时系统没什么压力，而第四种场景是数据库本来就要关闭了。这两种情况下，你不会太关注“性能”问题。所以这里，我们主要来分析一下前两种场景下的性能问题。

第一种是“redo log 写满了，要 flush 脏页”，这种情况是 InnoDB 要尽量避免的。因为出现这种情况的时候，整个系统就不能再接受更新了，所有的更新都必须堵住。如果你从监控上看，这时候更新数会跌为 0。

第二种是“内存不够用了，要先将脏页写到磁盘”，这种情况其实是常态。InnoDB 用缓冲池（buffer pool）管理内存，缓冲池中的内存页有三种状态：

*  第一种是，还没有使用的；
 *  第二种是，使用了并且是干净页；
 *  第三种是，使用了并且是脏页。

InnoDB 的策略是尽量使用内存，因此对于一个长时间运行的库来说，未被使用的页面很少。

而当要读入的数据页没有在内存的时候，就必须到缓冲池中申请一个数据页。这时候只能把最久不使用的数据页从内存中淘汰掉：如果要淘汰的是一个干净页，就直接释放出来复用；但如果是脏页呢，就必须将脏页先刷到磁盘，变成干净页后才能复用。

所以，刷脏页虽然是常态，但是出现以下这两种情况，都是会明显影响性能的：

1.  一个查询要淘汰的脏页个数太多，会导致查询的响应时间明显变长；
2.  日志写满，更新全部堵住，写性能跌为 0，这种情况对敏感业务来说，是不能接受的。

所以，InnoDB 需要有控制脏页比例的机制，来尽量避免上面的这两种情况。

**InnoDB 刷脏页的控制策略**

首先，你要正确地告诉 InnoDB 所在主机的 IO 能力，这样 InnoDB 才能知道需要全力刷脏页的时候，可以刷多快。

这就要用到 innodb\_io\_capacity 这个参数了，它会告诉 InnoDB 你的磁盘能力。

现在你知道了，InnoDB 会在后台刷脏页，而刷脏页的过程是要将内存页写入磁盘。所以，无论是你的查询语句在需要内存的时候可能要求淘汰一个脏页，还是由于刷脏页的逻辑会占用 IO 资源并可能影响到了你的更新语句，都可能是造成你从业务端感知到 MySQL“抖”了一下的原因。

要尽量避免这种情况，你就要合理地设置 innodb\_io\_capacity 的值，并且平时要多关注脏页比例(参数 innodb\_max\_dirty\_pages\_pct)，不要让它经常接近 75%。

转载于:https://www.cnblogs.com/lamp01/p/10763453.html

发表评论取消回复

表情：

评论列表（有 0 条评论，165人围观）

还没有评论，来说两句吧...

相关阅读

相关 MySQL InnoDB刷脏页详解

MySQL InnoDB刷脏页详解 1. InnoDB刷脏页的概念 2. InnoDB刷脏页的场景 3. InnoDB刷脏页的控制策略 1. Inn

落日映苍穹つ/ 2024年03月31日 09:12/ 0 赞/ 41 阅读

相关 MySQL 刷脏页的速度很慢可能是什么原因？

> 在 MySQL 中单独刷一个脏页的速度是很快的，如果发现刷脏页的速度很慢，说明触发了 MySQL 刷脏页的“连坐”机制，MySQL 的“连坐”机制是指当 MySQL 刷脏页

向右看齐/ 2024年02月05日 11:34/ 0 赞/ 36 阅读

相关什么情况下会引发 MySQL 刷脏页（flush）的操作？

什么情况下会引发 MySQL 刷脏页（flush）的操作？概述内存写满了，这个时候就会引发 flush 操作，对应到 InnoDB 就是 redo log

た入场券/ 2024年02月05日 11:34/ 0 赞/ 39 阅读

相关 MySQL中，什么是脏页和干净页？

> MySQL 为了操作的性能优化，会把数据更新先放入内存中，之后再统一更新到磁盘。当内存数据和磁盘数据内容不一致的时候，我们称这个内存页为脏页；内存数据写到磁盘后，内存的数据

Bertha 。/ 2024年02月05日 11:34/ 0 赞/ 47 阅读

相关 MySQL的刷脏机制

文章目录缓冲池 Buffer Pool 刷脏页的时机 MySQL定时刷 MySQL内存(buffer pool)不足

深碍√TFBOYSˉ_/ 2023年10月08日 15:44/ 0 赞/ 25 阅读

相关 mysql刷盘性能问题

mysql如何装至其他盘 mysql>showdatabases; 创建数据库(假如数据库名为mydb) mysql>createdatabasemydb; 删除数

谁借莪１个温暖的怀抱￠/ 2023年09月25日 09:46/ 0 赞/ 4 阅读

相关 mysql的脏读、不可重复读、幻读问题

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ub

女爷i/ 2023年02月20日 07:06/ 0 赞/ 11 阅读

相关让你的InnoDB更新插入操作变得更‘快’（刷脏页的控制策略）

刷脏页的控制策略告诉InnoDB 你（磁盘）有多‘快’（innodb\_io\_capacity） ![在这里插入图片描述][20200913102339730.

àì夳堔傛蜴生んèń/ 2022年12月06日 12:40/ 0 赞/ 98 阅读

相关 Mysql的刷脏页问题

平时的工作中，不知道你有没有遇到过这样的场景，一条 SQL 语句，正常执行的时候特别快，但是有时也不知道怎么回事，它就会变得特别慢，并且这样的场景很难复现，它不只随机，而且持续

- 日理万妓/ 2022年01月10日 16:35/ 0 赞/ 166 阅读

相关 redis存在大量脏页问题的追查记录

case现场线上发现一台机器内存负载很重，top后发现一个redis进程占了大量的内存，TOP内容如下： 27190 root 20 0 18.6

迈不过友情╰/ 2021年09月19日 09:48/ 0 赞/ 193 阅读