MYSQL io_capacity 哥俩,你调了吗?

Wesley13
• 阅读 649

MYSQL io_capacity 哥俩,你调了吗?

innodb_io_capacity and  innodb_io_capacity_max,这两个参数真的是innodb数据库引擎需要的参数吗?是innodb 需要他们,还是他们需要innodb 。这个问题到底是先有鸡,还是先有蛋呢?

innodb_io_capacity变量定义了InnoDB后台任务每秒可用的I/O操作数(IOPS),比如刷新缓冲池中的页面和合并更改缓冲区中的数据。

首先我们必须确认这个问题的重要性,io_capacity 到底要做点什么,在InnoDB中更新一段数据时,更新是在内存中进行的,缓冲池中受影响的页面(或多个页面)被标记为脏的。当您写入更多的数据时,脏页的数量将会增加,并且在某个时候,它们需要被写到磁盘上。这个过程在后台发生,称为刷新。innodb_io_capacity定义了InnoDB刷新页面的速度。

那么到底调整这个值,会产生什么影响,从哪里看,如果有PMM可以从innodb i/o data write 指标来看或者是从 innodb_data_fsyncs 这个指标来看,当然需要进行一些处理。

MYSQL io_capacity 哥俩,你调了吗?

innodb_io_capacity调整,将其参数逐步提高,并进行批量持续性的操作后,大致的结果如下,画一个草图。

MYSQL io_capacity 哥俩,你调了吗?

从图中可以看到,如果是同样的数据量的情况下,数字越小,写入系统需要的时间越长,以此类推,参数越大,相关写入同样数据的时间就越短。

而缩短数据的写入的时间,对于整体系统来说是有好处的,例如一个繁忙的系统,写操作等都是由 innodb_write_io_threads 数量来控制的,所以当较低的innodb_io_capacity 会引起刷新脏页的线程与刷新数据量之间的矛盾,最终会导致,IO整体负载加大,关机缓慢,甚至导致系统性能问题,从系统中刷出的脏页,MYSQL INNODB 会有DB WRITE REDO,undo, binlog 等操作,所以MYSQL I/O 系统是很繁忙的,降低由于刷脏页造成的占用 CPU 以及I/O 的时间对整体的系统都是有好处的。

所以调整innodb_io_capacity and  innodb_io_capacity_max 以适合你当前的系统,就变得更重要的尤其是针对负载较重的系统。

但调整大了,超过I/O系统的负荷又会怎么样?那问题就大了,本身I/O 承受不了一次性的写入,那整体I/O 就会陷入停顿,多个线程的写入,整体I/O系统在高负载的情况下,就会整体陷入性能问题,所以调整innodb_io_capacity and  innodb_io_capacity_max,量力而行,留有余地。

一般调整需要知道当前系统的IOPS 是多少,根据innodb_io_capacity参数指标, innodb_io_capacity_max 大于 innodb_io_capacity。

这里给一个参考,如果IOPS 没有超过200 在高并发的MYSQL数据库系统中很容易就会产生I/O性能瓶颈

15k rpm: 180-210 IOPS
10k rpm: 130-150 IOPS
7200 rpm: 80-100 IOPS
5400 rpm: 50-80 IOPS

下图是下面那篇专业的文字中的截图

MYSQL io_capacity 哥俩,你调了吗?

具体的关于这方面专业的文字 的文档,如果感兴趣可以加下面的QQ群后自行下载。

MYSQL io_capacity 哥俩,你调了吗?

MYSQL io_capacity 哥俩,你调了吗?

MYSQL io_capacity 哥俩,你调了吗?

本文分享自微信公众号 - AustinDatabases(AustinDatabases)。
如有侵权,请联系 support@oschina.cn 删除。
本文参与“OSC源创计划”,欢迎正在阅读的你也加入,一起分享。

点赞
收藏
评论区
推荐文章
blmius blmius
3年前
MySQL:[Err] 1292 - Incorrect datetime value: ‘0000-00-00 00:00:00‘ for column ‘CREATE_TIME‘ at row 1
文章目录问题用navicat导入数据时,报错:原因这是因为当前的MySQL不支持datetime为0的情况。解决修改sql\mode:sql\mode:SQLMode定义了MySQL应支持的SQL语法、数据校验等,这样可以更容易地在不同的环境中使用MySQL。全局s
皕杰报表之UUID
​在我们用皕杰报表工具设计填报报表时,如何在新增行里自动增加id呢?能新增整数排序id吗?目前可以在新增行里自动增加id,但只能用uuid函数增加UUID编码,不能新增整数排序id。uuid函数说明:获取一个UUID,可以在填报表中用来创建数据ID语法:uuid()或uuid(sep)参数说明:sep布尔值,生成的uuid中是否包含分隔符'',缺省为
Jacquelyn38 Jacquelyn38
3年前
2020年前端实用代码段,为你的工作保驾护航
有空的时候,自己总结了几个代码段,在开发中也经常使用,谢谢。1、使用解构获取json数据let jsonData  id: 1,status: "OK",data: 'a', 'b';let  id, status, data: number   jsonData;console.log(id, status, number )
Stella981 Stella981
2年前
KVM调整cpu和内存
一.修改kvm虚拟机的配置1、virsheditcentos7找到“memory”和“vcpu”标签,将<namecentos7</name<uuid2220a6d1a36a4fbb8523e078b3dfe795</uuid
Easter79 Easter79
2年前
Twitter的分布式自增ID算法snowflake (Java版)
概述分布式系统中,有一些需要使用全局唯一ID的场景,这种时候为了防止ID冲突可以使用36位的UUID,但是UUID有一些缺点,首先他相对比较长,另外UUID一般是无序的。有些时候我们希望能使用一种简单一些的ID,并且希望ID能够按照时间有序生成。而twitter的snowflake解决了这种需求,最初Twitter把存储系统从MySQL迁移
Wesley13 Wesley13
2年前
mysql设置时区
mysql设置时区mysql\_query("SETtime\_zone'8:00'")ordie('时区设置失败,请联系管理员!');中国在东8区所以加8方法二:selectcount(user\_id)asdevice,CONVERT\_TZ(FROM\_UNIXTIME(reg\_time),'08:00','0
Wesley13 Wesley13
2年前
MySQL数据库InnoDB存储引擎Log漫游(1)
作者:宋利兵来源:MySQL代码研究(mysqlcode)0、导读本文介绍了InnoDB引擎如何利用UndoLog和RedoLog来保证事务的原子性、持久性原理,以及InnoDB引擎实现UndoLog和RedoLog的基本思路。00–UndoLogUndoLog是为了实现事务的原子性,
Stella981 Stella981
2年前
Android蓝牙连接汽车OBD设备
//设备连接public class BluetoothConnect implements Runnable {    private static final UUID CONNECT_UUID  UUID.fromString("0000110100001000800000805F9B34FB");
Wesley13 Wesley13
2年前
MySQL部分从库上面因为大量的临时表tmp_table造成慢查询
背景描述Time:20190124T00:08:14.70572408:00User@Host:@Id:Schema:sentrymetaLast_errno:0Killed:0Query_time:0.315758Lock_
Python进阶者 Python进阶者
7个月前
Excel中这日期老是出来00:00:00,怎么用Pandas把这个去除
大家好,我是皮皮。一、前言前几天在Python白银交流群【上海新年人】问了一个Pandas数据筛选的问题。问题如下:这日期老是出来00:00:00,怎么把这个去除。二、实现过程后来【论草莓如何成为冻干莓】给了一个思路和代码如下:pd.toexcel之前把这