深入理解 MVCC 与 BufferPool 缓存机制

深入理解 MVCC 与 BufferPool 缓存机制

在 MySQL 数据库中,MVCC(Multi-Version Concurrency Control)多版本并发控制机制和 BufferPool 缓存机制是非常重要的概念,它们对于保证数据的一致性、并发性以及提升数据库性能起着关键作用。本文将深入探讨这两种机制,帮助读者更好地理解其原理和应用。

一、MVCC 多版本并发控制机制

  1. 隔离性保证

    • MySQL 在可重复读隔离级别下,通过 MVCC 机制来保证事务较高的隔离性。例如,在一个事务中多次执行相同的 SQL 查询语句,即使其他事务对数据进行了修改,当前事务的查询结果也不会受到影响。
    • 与串行化隔离级别不同,MVCC 在读写操作时默认不通过加锁互斥来保证隔离性,避免了频繁加锁带来的性能开销,而串行化隔离级别是将所有操作加锁互斥来实现隔离性。
    • MySQL 在读已提交和可重复读隔离级别下都实现了 MVCC 机制。
  2. undo 日志版本链与 read view 机制

    • undo 日志版本链:当一行数据被多个事务依次修改时,MySQL 会保留每次修改前的数据 undo 回滚日志,并使用两个隐藏字段 trx_id(事务 ID)和 roll_pointer 将这些 undo 日志串联起来,形成一个历史记录版本链。例如,对于一个 account 表中的记录,每次修改后都会生成新的 undo 日志,记录修改前的数据状态。
    • read view 机制:在可重复读隔离级别下,当事务开启并执行任何查询 SQL 时,会生成当前事务的一致性视图 read - view,该视图在事务结束之前保持不变(读已提交隔离级别在每次执行查询 SQL 时会重新生成)。read - view 由执行查询时所有未提交事务 id 数组(其中最小的 id 为 min_id)和已创建的最大事务 id(max_id)组成。事务中的 SQL 查询结果需要从对应版本链中的最新数据开始,逐条与 read - view 进行比对,以得到最终的快照结果。
    • 版本链比对规则
      • 如果 row 的 trx_id 落在绿色部分(trx_id < min_id),表示该版本是已提交事务生成的,数据可见。
      • 如果 row 的 trx_id 落在红色部分(trx_id > max_id),表示该版本是由将来启动的事务生成的,不可见(若 row 的 trx_id 就是当前自己的事务则可见)。
      • 如果 row 的 trx_id 落在黄色部分(min_id <= trx_id <= max_id),包括两种情况:
        • 若 row 的 trx_id 在视图数组中,表示该版本是未提交事务生成的,不可见(若 row 的 trx_id 就是当前自己的事务则可见)。
        • 若 row 的 trx_id 不在视图数组中,表示该版本是已提交事务生成的,可见。
    • 对于删除操作,可视为 update 的特殊情况,会将版本链上最新数据复制一份,修改 trx_id 为删除操作的 trx_id,并在记录头信息的 deleted_flag 标记位写上 true,表示记录已被删除。查询时,若查到的记录 delete_flag 为 true,则不返回数据。
    • 注意,begin/start transaction 命令并不是事务的真正起点,执行到它们之后的第一个修改 InnoDB 表的语句时,事务才正式启动,MySQL 才会分配事务 id,且严格按照事务启动顺序分配。

二、Innodb 引擎 SQL 执行的 BufferPool 缓存机制

  1. 为何不直接更新磁盘数据
    • 直接对磁盘文件进行随机读写并更新数据性能很差,因为磁盘随机读写性能远低于内存操作。如果来一个请求就直接更新磁盘文件,数据库无法承受高并发。
  2. BufferPool 缓存机制原理
    • MySQL 采用了一套复杂机制,先更新内存中的 BufferPool,然后顺序写日志文件(如 redo 日志)。更新内存性能极高,顺序写磁盘日志文件性能也较高,这样可以保证在较高配置机器上每秒能处理几千的读写请求,同时保证各种异常情况下的数据一致性。例如,执行一个 update 语句时,数据会先在 BufferPool 中更新,同时记录 redo 日志,后续再根据一定策略将 BufferPool 中的数据写入磁盘。

三、总结

MVCC 机制通过 read - view 和 undo 版本链比对机制,让不同事务能根据规则读取同一条数据在版本链上的不同版本,保证了事务隔离性。BufferPool 缓存机制则通过先更新内存再写日志的方式,提升了数据库性能并保证数据一致性。理解这两种机制对于优化数据库应用、处理并发事务以及确保数据可靠性都具有重要意义。在实际应用中,合理利用 MVCC 的隔离级别和 BufferPool 的缓存特性,可以有效提高数据库系统的性能和稳定性,为业务提供可靠的数据支持。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.rhkb.cn/news/498057.html

如若内容造成侵权/违法违规/事实不符,请联系长河编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

手机发烫怎么解决?

在当今这个智能手机不离手的时代&#xff0c;手机发烫成了不少人头疼的问题。手机发烫不仅影响使用手感&#xff0c;长期过热还可能损害手机硬件、缩短电池寿命&#xff0c;甚至引发安全隐患。不过别担心&#xff0c;下面这些方法能帮你有效给手机 “降温”。 一、使用习惯方面…

BUUCTF Pwn ciscn_2019_es_2 WP

1.下载 checksec 用IDA32打开 定位main函数 发现了个假的后门函数&#xff1a; 看看vul函数&#xff1a; 使用read读取 想到栈溢出 但是只有48个 只能覆盖EBP和返回地址 长度不够构造 所以使用栈迁移&#xff1a; 栈迁移需要用到leave ret 使用ROPgadget找地址&#xff1a; …

IEDA 使用auto Dev编码助手配置Deep Seek V3

文章目录 API Key的申请和创建auto Dev的下载auto Dev的安装Deep seek V3的连接配置和注意事项错误解决&#xff1a;You LLM server Key is empty API Key的申请和创建 登陆Deep Seek开放平台&#xff0c;创建API Key 并复制 auto Dev的下载 auto Dev项目地址&#xff0c;发…

vue3学习笔记(6)-生命周期、hooks

1.生命周期 <template><div><div>{{ a }}</div><div click"test"></div></div> </template> <script setup lang"ts" name"hi"> import { ref, onBeforeMount, onMounted, onBeforeUpdat…

#端云一体化开发# #HarmonyOS Next#《说书人》鸿蒙原生基于角色的对话式文本编辑开发方案

1、写在前面 过去的一百年里&#xff0c;在“编程”的这个行业诞生之初&#xff0c;人们采用面向过程的方式进行开发&#xff0c;但是&#xff0c;伴随着程序规模的日益增大&#xff0c;程序的复杂度也随之增加&#xff0c;使用结构化编程方法来管理复杂的程序逻辑变得越来越困…

【ELK】ES单节点升级为集群模式--太细了!

提示&#xff1a;文章写完后&#xff0c;目录可以自动生成&#xff0c;如何生成可参考右边的帮助文档 文章目录 前言准备工作1. 查看现状【单节点】2. 原节点改集群模式3. 改es配置文件&#xff0c;增加集群相关配置项4. *改docker映射的端口* 启动新节点5. docker-compose起一…

Python跨年烟花

目录 系列文章 写在前面 技术需求 完整代码 下载代码 代码分析 1. 程序初始化与显示设置 2. 烟花类 (Firework) 3. 粒子类 (Particle) 4. 痕迹类 (Trail) 5. 烟花更新与显示 6. 主函数 (fire) 7. 游戏循环 8. 总结 注意事项 写在后面 系列文章 序号直达链接爱…

未来网络技术的新征程:5G、物联网与边缘计算(10/10)

一、5G 网络&#xff1a;引领未来通信新潮流 &#xff08;一&#xff09;5G 网络的特点 高速率&#xff1a;5G 依托良好技术架构&#xff0c;提供更高的网络速度&#xff0c;峰值要求不低于 20Gb/s&#xff0c;下载速度最高达 10Gbps。相比 4G 网络&#xff0c;5G 的基站速度…

艾体宝方案丨全面提升API安全:AccuKnox 接口漏洞预防与修复

一、API 安全&#xff1a;现代企业的必修课 在现代技术生态中&#xff0c;应用程序编程接口&#xff08;API&#xff09;扮演着不可或缺的角色。从数据共享到跨平台集成&#xff0c;API 成为连接企业系统与外部服务的桥梁。然而&#xff0c;伴随云计算的普及与微服务架构的流行…

# 【鸿蒙开发】多线程之Worker的使用

【鸿蒙开发】多线程之Worker的使用 文章目录 【鸿蒙开发】多线程之Worker的使用前言一、Worker的介绍二、注意事项三、Worker使用示例1.新建一个Worker2.主线程使用Worker3.子线程Worker的使用 四、效果展示 前言 本文主要介绍了多线程的方法之一&#xff0c;使用Worker开启多…

leetcode 面试经典 150 题:矩阵置零

链接矩阵置零题序号73题型二维数组解题方法标记数组法难度中等熟练度✅✅✅✅ 题目 给定一个 m x n 的矩阵&#xff0c;如果一个元素为 0 &#xff0c;则将其所在行和列的所有元素都设为 0 。请使用 原地 算法。 示例 1&#xff1a; 输入&#xff1a;matrix [[1,1,1],[1,0,1]…

适用于项目经理的跨团队协作实践:Atlassian Jira与Confluence集成

适用于项目经理的跨团队协作实践&#xff1a;Atlassian Jira与Confluence集成 现代项目经理的核心职责是提供可视性、保持团队一致&#xff0c;并确保团队拥有交付出色工作所需的资源。在过去几年中&#xff0c;由于分布式团队的需求不断增加&#xff0c;项目经理这一角色已迅速…

MySQL官网驱动下载(jar包驱动和ODBC驱动)【详细教程】

1.打开MySQL的官网&#xff0c;选择下载(Download) MySQL[这里是图片001]https://www.mysql.com/cn/ 2.往下划点击MySQL Community(GPL)Downloads 3.要下载MySQL的jar包的选择Connector/J 4.进入后&#xff0c;根据自己的需求选择相应的版本 5.下载完成后&#xff0c;进行解压…

WPF 绘制过顶点的圆滑曲线 (样条,贝塞尔)

在一个WPF项目中要用到样条曲线&#xff0c;必须过顶点&#xff0c;圆滑后还不能太走样&#xff0c;捣鼓一番&#xff0c;发现里面颇有玄机&#xff0c;于是把我多方抄来改造的方法发出来&#xff0c;方便新手&#xff1a; 如上图&#xff0c;看代码吧&#xff1a; ----------…

北京某新能源汽车生产及办公网络综合监控项目

北京某新能源汽车是某世界500强汽车集团旗下的新能源公司&#xff0c;也是国内首个获得新能源汽车生产资质、首家进行混合所有制改造、首批践行国有控股企业员工持股的新能源汽车企业&#xff0c;其主营业务包括纯电动乘用车研发设计、生产制造与销售服务。 项目现状 在企业全…

【阅读笔记】《基于区间梯度的联合双边滤波图像纹理去除方法》

一、联合双边滤波背景 联合双边滤波&#xff08;Joint Bilateral Filter, JBF&#xff09;是一种图像处理技术&#xff0c;它在传统的双边滤波&#xff08;Bilateral Filter, BF&#xff09;基础上进行了改进&#xff0c;通过引入一个引导图&#xff08;guidance image&#x…

VIM: Vision Mamba基于双向状态空间模型的高效视觉表示学习

这篇文章的主要内容可以概括如下&#xff1a; 背景与动机&#xff1a; 近年来&#xff0c;状态空间模型&#xff08;SSM&#xff09;在长序列建模中展现出巨大潜力&#xff0c;尤其是Mamba模型在硬件感知设计上的高效性。 然而&#xff0c;现有的SSM模型在处理视觉数据时面临…

京存SAN助力电子病历建设

引言 随着信息技术的快速发展&#xff0c;电子病历系统(EMR)已成为现代医疗的重要组成部分。电子病历不仅能够提高医疗服务的效率和质量&#xff0c;还能更好地保护患者的隐私和数据安全。作为国内领先的存储解决方案提供商&#xff0c;京存存储凭借其卓越的技术实力和丰富的实…

python利用selenium实现大麦网抢票

大麦网&#xff08;damai.cn&#xff09;是中国领先的现场娱乐票务平台&#xff0c;涵盖演唱会、音乐会、话剧、歌剧、体育赛事等多种门票销售。由于其平台上经常会有热门演出&#xff0c;抢票成为许多用户关注的焦点。然而&#xff0c;由于票务资源的有限性&#xff0c;以及大…

【疑难杂症】 HarmonyOS NEXT中Axios库的响应拦截器无法拦截424状态码怎么办?

今天在开发一个HarmonyOS NEXT的应用的时候&#xff0c;发现http接口如果返回的状态码是424时&#xff0c;我在axios中定义的拦截器失效了。直接走到了业务调用的catch中。 问题表现&#xff1a; 我的拦截器代码如下&#xff1a; 解决办法&#xff1a; 先说解决办法&#xff…