我的编程空间,编程开发者的网络收藏夹
学习永远不晚

深入理解MySQL中MVCC与BufferPool缓存机制

短信预约 -IT技能 免费直播动态提醒
省份

北京

  • 北京
  • 上海
  • 天津
  • 重庆
  • 河北
  • 山东
  • 辽宁
  • 黑龙江
  • 吉林
  • 甘肃
  • 青海
  • 河南
  • 江苏
  • 湖北
  • 湖南
  • 江西
  • 浙江
  • 广东
  • 云南
  • 福建
  • 海南
  • 山西
  • 四川
  • 陕西
  • 贵州
  • 安徽
  • 广西
  • 内蒙
  • 西藏
  • 新疆
  • 宁夏
  • 兵团
手机号立即预约

请填写图片验证码后获取短信验证码

看不清楚,换张图片

免费获取短信验证码

深入理解MySQL中MVCC与BufferPool缓存机制

一、MVCC机制

  • MVCC(Multi Version Concurrency Control),MySQL(默认)RR隔离级别就是通过该机制来保证的,对一行数据的读与写两个操作默认是不会通过加锁互斥来保证隔离性的
  • 串行化隔离级别是为了保证较高的隔离性,是通过将所有操作加锁互斥来实现的
  • MySQL在RC隔离级别和RR隔离级别下都实现了MVCC机制
  • RC每次查询都会创建一个reade-view,而RR在创建完read-view之后,在不提交事务之前,每次查询还是第一次创建的read-view

undo日志版本链与read-view机制

  • undo日志版本链是指一行数据被多个事务一次修改后,当每个事务修改完之后,MySQL会保留修改前的数据undo回滚日志,并且用两个隐藏字段trx_id和roll_pointer把只写undo日志串联起来形成一个历史记录版本链.
  • RR隔离级别,当事务开启,执行任何SQL时会生成当前事务的read-view一致性视图,该视图在事务结束之前都不会变化(如果是RC隔离界别在每次执行查询SQL时都会重新生成最新的read-view),这个视图由执行查询时所有未提交的事务id数组(数组里最小的id为min_id)和已创建的最大事务id(max_id)组成,事务里任何SQL查询结果需要从对应版本链里的最新数据开始逐条跟read-view作比对,从而得到最终的结果

版本链比对规则

  • 如果row的trx_id落在绿色部分(trx < min_id),表示这个版本是已提交的事务生成的,这个数据是可见的
  • 如果row的trx_id落在红色部分(trx > max_id),表示这个版本是由将来启动的(未开始)事务生成的,是不可见的(若row的trx_id就是当前自己的事务是可见的)
  • 如果 row 的 trx_id 落在黄色部分(min_id <= trx_id <= max_id),那就包括两种情况
    • 若 row 的 trx_id 在视图数组中,表示这个版本是由还没提交的事务生成的不可见(若 row 的 trx_id 就是当前自己的事务是可见的)
    • 若 row 的 trx_id 不在视图数组中,表示这个版本是已经提交了的事务生成的可见

二、BufferPool机制

InnoDB执行的BufferPool缓存机制:

InnoDB的SQL执行流程:

  • 当客户端执行一条修改的SQL,需要经过Server层,再调用具体的执行引擎
  • 加载数据页,把需要修改数据所在的数据页,缓存到BufferPool
  • 修改前写undo日志,记录更改前数据,如果事务执行失败,使用undo日志进行数据回滚
  • 更新BufferPool中的数据
  • 准备提交事务写redo日志,保存操作记录。redo日志用来恢复已提交事务的BufferPool
  • 准备提交事务写binlog日志,保存操作记录。binlog日志用来恢复磁盘数据
  • 事务提交完成,此时binlog日志写入成功,并且在redo日志中记录了commit标记。事务提交完成后binlog日志和redo日志数据保持一致
  • 数据持久化,IO线程不定期把BufferPool中的数据随机写入到磁盘,完成持久化

三、总结

MVCC实现机制(为什么同一个事务第一次查询出来之后,就算其它事务把新数据修改了,当前事务还是看到之前的数据)

  • 它内部实际有个undo日志版本链,然后在事务第一次查询的时候,它会生成一个read-view一致性视图,然后我们后面所有查询的数据都会根据我们的那个undo日志版本链去跟我们当前的read-view里面按照一定的规则逐行去比对查找对应的数据

BufferPool机制:

  • 数据库的增删改查都是直接操作BufferPool的,当我们执行一条修改的SQL经历过Server层之后会调用具体的执行引擎,然后将相关的数据页加载到BufferPool中,修改前写undo日志,记录修改前的数据为了方便事务失败之后的回滚,然后更新BufferPool,准备提交事务写redo日志保存操作记录,因为如果MySQL宕机了会从redo日志中将数据恢复到BufferPool中,然后会写binlog日志,保存操作记录,因为当我们删除数据库跑路时,binlog是用来恢复磁盘数据的,事务提交完成后,binlog日志写入成功,并且在redo日志记录提交标记,此时redo日志和binlog日志数据一致,而redo日志采用顺序IO写入,这样效率堪比内存操作。对于数据持久化,InnoDB会有个后台线程定时去将缓存刷到磁盘里

为什么MySQL不能直接更新磁盘上的数据而是设置了这么一套复杂的机制来执行SQL

  • 因为来一个请求直接对磁盘文件进行随机读写,然后更新磁盘文件里的数据性能可能相当差.
  • 因为磁盘随机读写的性能是非常差的,所以直接更新磁盘文件时不能让数据库抗住高并发的
  • MySQL这套机制看起来很复杂,但它可以保证每个更新请求都是更新内存BufferPool,然后顺序写日志文件,同时还能保证各种异常情况下的数据一致性
  • 更新内存的性能是极高的,然后顺序写磁盘上的日志文件的性能也是非常高的,要远高于随机读写磁盘文件,正是通过这套机制,才能让我们的MySQL数据库在较高配置的机器上每秒可以抗下几千甚至上完的读写请求

到此这篇关于深入理解MySQL中MVCC与BufferPool缓存机制的文章就介绍到这了,更多相关MVCC与BufferPool缓存机制内容请搜索编程网以前的文章或继续浏览下面的相关文章希望大家以后多多支持编程网!

免责声明:

① 本站未注明“稿件来源”的信息均来自网络整理。其文字、图片和音视频稿件的所属权归原作者所有。本站收集整理出于非商业性的教育和科研之目的,并不意味着本站赞同其观点或证实其内容的真实性。仅作为临时的测试数据,供内部测试之用。本站并未授权任何人以任何方式主动获取本站任何信息。

② 本站未注明“稿件来源”的临时测试数据将在测试完成后最终做删除处理。有问题或投稿请发送至: 邮箱/279061341@qq.com QQ/279061341

深入理解MySQL中MVCC与BufferPool缓存机制

下载Word文档到电脑,方便收藏和打印~

下载Word文档

猜你喜欢

MySQL中MVCC与BufferPool缓存机制是什么

本篇内容主要讲解“MySQL中MVCC与BufferPool缓存机制是什么”,感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让小编来带大家学习“MySQL中MVCC与BufferPool缓存机制是什么”吧!一、MVCC
2023-06-30

深入解析MySQL MVCC 原理与实现

深入解析MySQL MVCC 原理与实现MySQL是目前最流行的关系型数据库管理系统之一,它提供了多版本并发控制(Multiversion Concurrency Control,MVCC)机制来支持高效并发处理。MVCC是一种在数据库中处
2023-10-22

缓存的齿轮:深入了解 ASP 页面片段缓存的内部机制

ASP 页面片段缓存提升了 web 应用程序的性能,了解其内部机制对于优化缓存策略至关重要。本文深入探讨了 ASP 页面片段缓存的各个方面,从其工作原理到有效配置。
缓存的齿轮:深入了解 ASP 页面片段缓存的内部机制
2024-03-05

怎么理解Flutter图片加载与缓存机制

本篇内容主要讲解“怎么理解Flutter图片加载与缓存机制”,感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让小编来带大家学习“怎么理解Flutter图片加载与缓存机制”吧!前言今天来学习一下 Flutter 自身是如
2023-06-25

PHP缓存机制详解:深入探究其工作原理和实际应用

PHP缓存机制全解析:深入理解其原理与应用引言:在开发Web应用程序中,缓存是一种重要的技术手段,能够显著提升应用程序的性能和用户体验。而PHP作为一种常用的服务器端编程语言,也提供了丰富的缓存机制供开发者使用。本文将深入探讨PHP缓存机
PHP缓存机制详解:深入探究其工作原理和实际应用
2024-01-23

深入解析MySQL中的各种锁机制

MySQL 各种锁详解一、引言在并发访问中,数据库需要使用锁来保护数据的一致性和完整性。MySQL 提供了多种类型的锁,包括共享锁、排他锁、意向共享锁、意向排他锁等。本文将使用具体的代码示例介绍并解析这些锁的使用方式和特点。二、共享锁(Sh
深入解析MySQL中的各种锁机制
2023-12-21

MySQL锁机制在INSERT中的深入解析

在MySQL中,当执行INSERT操作时,会涉及到锁机制来确保数据的一致性和并发性。主要涉及到的锁类型包括行级锁和表级锁。行级锁:在MySQL中,行级锁是最细粒度的锁,它只会锁定要操作的行,而不会锁定整个表。当执行INSERT操作时,My
MySQL锁机制在INSERT中的深入解析
2024-08-19

深入理解Go语言函数的原理与机制

深入理解Go语言函数的原理与机制在Go语言中,函数是一等公民,也是其最重要的特性之一。函数可以作为参数传递,也可以作为返回值,这种特性使得函数在Go语言中具有非常灵活的应用方式。在本文中,我们将深入探讨Go语言函数的原理与机制,通过具体的
深入理解Go语言函数的原理与机制
2024-03-10

深入了解PHP底层机制与实现原理

深入了解PHP底层机制与实现原理PHP是一种广泛应用的服务器端脚本语言,它的底层机制和实现原理对于理解其工作原理和优化性能都具有重要意义。本文将深入探讨PHP的底层机制与实现原理,并配以具体代码示例,以帮助读者更好地理解和应用PHP。PHP
深入了解PHP底层机制与实现原理
2023-11-08

深入理解PHP中的值传递机制

深入理解PHP中的值传递机制PHP是一种流行的服务器端脚本语言,广泛应用于Web开发领域。在PHP中,有两种传递参数的方式:值传递(pass by value)和引用传递(pass by reference)。本文将重点探讨PHP中的值传
深入理解PHP中的值传递机制
2024-03-08

编程热搜

目录