您现在的位置:新闻首页>资本 > 对MySQL锁、事务、MVCC的简单认识
对MySQL锁、事务、MVCC的简单认识
mysql教程栏目介绍对MySQL锁、事务、MVCC的简单认识。
更多相关免费学习:mysql教程(视频)
单条SQL语句执行时,会被当成一个事务提交吗?
以下内容摘自 《高性能MySQL》(第3版)
“
MySQL默认采用自动提交(AUTOCOMMIT)模式。也就是说,如果不是显式地开始一个事务,则每个查询都被当作一个事务执行提交操作。在当前连接中,可以通过设置AUTOCOMMIT变量来启用或者禁用自动提交模式
”MySQL 是如何实现事务的 ACID 的?
事务具有 ACID 四大特性,那么 MySQL 是如何实现事务的这四个属性的呢?
原子性 要么全部成功,要么全部失败。MySQL是通过记录 undo_log 的方式来实现的原子性。undo_log 即回滚日志,在真正的SQL执行之前先将 undo_log 写入磁盘,然后再对数据库的数据进行操作。如果发生异常或回滚,就可以依据 undo_log 进行反向操作,恢复数据在事务执行之前的样子。
持久性 事务一旦被正常提交,它对数据库的影响就应该是永久的。此时即使系统崩溃,修改的数据也不会丢失。InnoDB 作为 MySQ L的存储引擎,数据是存放在磁盘中的,但如果每次读写数据都需要磁盘IO,效率会很低。为此,InnoDB 提供了缓存(Buffer Pool),作为访问数据库的缓冲:当从数据库读取数据时,会首先从 Buffer Pool 中读取,如果 Buffer Pool 中没有,则从磁盘读取后放入 Buffer Pool ;当向数据库写入数据时,会首先写入 Buffer Pool,Buffer Pool 中修改的数据会定期刷新到磁盘中。
这样的设计也带来了相应的问题:如果数据提交了,这时数据还在缓冲池里(还没刷盘),此时MySQL宕机、断电了怎么办?数据会不会丢失?
答案是不会,MySQL 通过 redo_log 的机制,保证了持久性。redo_log 即重做日志,简单说就是当数据修改时,除了修改 Buffer Pool 中的数据,还会在 redo_log 记录这次操作;当事务提交时,会调用 fsync 接口对 redo_log 进行刷盘。如果MySQL宕机,重启时可以读取 redo_log 中的数据,对数据库进行恢复。
隔离性
隔离性是 ACID 里面最复杂的一个,这里面涉及到隔离级别的概念,一共有四个
Read uncommittedRead committedRepeatable readSerializable
简单说隔离级别就是规定了:一个事务中数据的修改,哪些事务之间可见,哪些不可见。而隔离性就是要管理多个并发读写请求的访问顺序。
MySQL 对于隔离性的具体实现我们后面会展开说。
一致性
通过回滚、恢复和在并发环境下的隔离做到一致性。
事务并发可能导致的问题
通过上个问题我知道单条 DDL 执行也会被当成一个事务自动提交,那么无论是多条SQL并发,还是多个自己手动组织的包含多条SQL的事务并发,都会导致事务并发问题。
具体来说有:
脏写 (一个事务提交的数据覆盖了另一个事务未提交的数据)脏读 (一个事务读取到另一个事务未提交的数据)不可重复读 (重点在于update和delete 一个事务内多次读取的数据不一样)幻读 (重点在于insert 一个事务内多次读取的记录数不一样)
上面我们提到了事务的隔离级别,MySQL 的所有隔离级别都能保证不产生脏写,所以就剩下脏读、不可重复读和幻读的问题了。
下面具体看下各隔离级别是如何解决或未解决上面这些问题的:
Read uncommitted
未提交读,这个级别在读的过程中不会加任何锁,只在写请求时加锁,所以写操作在读的过程中修改数据,就会造成脏读。也自然会产生不可重复读和幻读。
Read committed
已提交读,与未提交读一样也是读不加锁,写加锁。不一样的是利用了 MVCC 机制避免了脏读的问题,同样会有不可重复读和幻读的问题。关于 MVCC 我们后面会详细说。
Repeatable read
MySQL 默认的隔离级别,在这个级别 MySQL利用两种方式解决问题
读写锁 读读并行时加读锁,读读是共享锁的。 只要有写请求就加写锁,这样读写是串行的。 读取数据时加锁,其它事务无法修改这些数据。所以不会产生不可重复读。 修改删除数据时也要加锁,其它事务无法读取这些数据,所以不会产生脏读。 第一种方式就是我们常说的 “悲观锁”,数据在整个事务处理过程中处于锁定状态,比较保守,性能开销比较大。MVCC (后面讲)
此外还利用了Next-Key锁 在一定程度上解决了幻读的问题。关于这个我们后面再说。
Serializable
在该隔离级别下事务都是串行顺序执行的。 如果禁用了自动提交,则 InnoDB 会将所有普通的 SELECT 语句隐式转换为 SELECT ... LOCK IN SHARE MODE。即给读操作隐式加一把读共享锁,从而避免了脏读、不可重读复读和幻读问题。
MVCC“
Multiversion concurrency control (MCC or MVCC), is a concurrency control method commonly used by database management systems to provide concurrent access to the database and in programming languages to implement transactional memory
”
翻译过来就是:多版本并发控制(MCC或MVCC)是一种并发控制方法,通常被数据库管理系统用来提供对数据库的并发访问,并以编程语言来实现事务存储。
简单来说就是数据库用来控制并发的一种方法。每个数据库对于 MVCC 的实现可能不一样。
以我们常用的 MySQL 来说,MySQL 的 InnoDB 引擎实现了 MVCC 。
MVCC 能解决什么问题
从上面的定义我们能看出,MVCC 主要解决事务并发时数据一致性的问题
InnoDB 是如何实现的 MVCC
下面这个图来自《高性能MySQL》(第3版)
这本书写的很好,翻译的也不错,我对于 MySQL 最初的系统性认识也是因为读了这本书,然而在对于 MVCC 是如何实现的讲述上,个人认为是有些问题的。
来看下哪里有问题
首先看下 MySQL 的官方文档,我对比了 5.1、5.6、5.7 三个版本的 文档[1] ,对 MVCC 这部分的描述,几乎是相同的。
根据文档很明显是在每条数据增加三个隐藏列:
6字节的 DB_TRX_ID 字段,表示最近一次插入或者更新该记录的事务ID。7字节的 DB_ROLL_PTR 字段,指向该记录的 rollback segment 的 undo log 记录。6字节的 DB_ROW_ID,当有新数据插入的时候会自动递增。当表上没有用户主键的时候,InnoDB会自动产生聚集索引,包含DB_ROW_ID字段。
这里我补充一张包含 rollback segment 的 MySQL 内部结构图
版本链
之前我们讲过 undo_log 的概念,每条 undo日志都有一个 roll_pointer 属性,那么所有的版本都会被 roll_pointer 属性连接成一个链表,我们把这个链表称之为版本链,版本链的头节点就是当前记录最新的值。
ReadView
通过隐藏列和版本链,MySQL 可以将数据恢复到指定版本;但是具体要恢复到哪个版本,则需要根据 ReadView 来确定。所谓 ReadView,是指事务(记做事务A)在某一时刻给整个事务系统(trx_sys)打快照,之后再进行读操作时,会将读取到的数据中的事务 id 与 trx_sys 快照比较,从而判断数据对该 ReadView 是否可见,即对事务A是否可见。
至此我们发现 MVCC 就是基于隐藏字段、undo_log 链和 ReadView 来实现的。
Read committed 中的 MVCC
前面我们讲过 Read committed 隔离级别中使用 MVCC 解决脏读问题。 这里我参考了两篇文章:
InnoDB只会查找版本早于当前事务版本的数据行(也就是,行的版本号小于或是等于事务的系统版本 号),这样可以确保数据读取的行,要么是在事务开始前已经存在的,要么是事务自身插入或修改过的。因此不会产生脏读。
Read committed 隔离级别下出现不可重复读是由于 read view 的生成机制造成的。在 Read committed 级别下,只要当前语句执行前已经提交的数据都是可见的。在每次语句执行的过程中,都关闭 read view, 重新创建当前的一份 read view。这样就可以根据当前的全局事务链表创建 read view 的事务区间。简单说就是在 Read committed 隔离级别下,MVCC 在每次 select 时生成一个快照版本,所以每次 select 都会读到不同的版本数据,所以会产生不可重复读。
Repeatable read 中的 MVCC
Repeatable read 隔离级别解决了不可重复读的问题,一个事务中多次读取不会出现不同的结果,保证了可重复读。前文中我们说 Repeatable read 有两种实现方式,一种是悲观锁的方式,相对的 MVCC 就是乐观锁的方式。
Repeatable read 隔离级别能解决不可重复读根本原因其实就是 read view 的生成机制和 Read committed 不同。
Read committed :只要是当前语句执行前已经提交的数据都是可见的。Repeatable read :只要是当前事务执行前已经提交的数据都是可见的。
不像 Read committed,在 Repeatable read 的隔离级别下,创建事务的时候,就生成了当前的 global read view,一直维持到事务结束。这样就能实现可重复读。
幻读与 Next-Key 锁当前读与快照读
通过 MVCC 机制,虽然让数据变得可重复读,但我们读到的数据可能是历史数据,是不及时的数据,不是数据库当前的数据!对于这种读取历史数据的方式,我们叫它快照读 (snapshot read),而读取数据库当前版本数据的方式,叫当前读 (current read) 参考[3]
快照读:就是selectselect * from table ….;当前读:特殊的读操作,插入/更新/删除操作,属于当前读,处理的都是当前的数据,需要加锁。select * from table where ? lock in share mode;select * from table where ? for update;insert;update ;delete;解决幻读
为了解决当前读中的幻读问题,MySQL事务使用了 next-key lock 。
Repeatable read 通过 next-key lock 机制避免了幻读现象。
InnoDB存储引擎有3种行锁的算法,分别是:
Record Lock: 单个记录上的锁Gap Lock: 间隙锁,锁定一个范围,但不包括记录本上Next-Key Lock: Gap Lock + Record Lock
next-key lock 是行锁的一种,实现相当于 record lock(记录锁) + gap lock(间隙锁);其特点是不仅会锁住记录本身( record lock 的功能),还会锁定一个范围( gap lock 的功能)。
当InnoDB扫描索引记录的时候,会首先对索引记录加上行锁(Record Lock),再对索引记录两边的间隙加上间隙锁(Gap Lock)。加上间隙锁之后,其他事务就不能在这个间隙修改或者插入记录。
当查询的索引含有唯一属性的时候,Next-Key Lock 会进行优化,将其降级为Record Lock,即仅锁住索引本身,不是范围。
上一篇:php怎么生成不重复随机数
-
经济 业界 推荐 美圆指数 29美元 福汇外汇 港币兑换美元 公信宝 币世界 ok币 加拿大元汇率 金条价格走势 ok交易所 白银套利 ppi指数 金价走势分析 中币交易所 玩客币行情 港币兑美元 马来西亚货币 今日复明日 旧日噩梦 bullish 海曼明斯基 绿天鹅 黄金行情走势 汇率日元 火币pro 莱茨狗 fx57 美元价格 币世界快讯 金价格走势图 隔夜利率 全球货币战争 波场tron 2199美元 stdaily 伊朗油价 国际石油行情 btcchina 美元日元汇率 恒生指数实时 大立光股票 回升 hc币 夏盈盈 希腊公投 市场黄金价格 黄金k线走势图 蜡烛图 单均线交易 日元美元 国际油价趋势 比特币白皮书 2012年金价走势 usdt 白银价钱 今日石油价格 fx1800 缩表 油价走势 台股 sdag 杨林科 港币汇率 明斯基时刻 猛烈打压 stellar 隔夜美股行情 白银行情 dp1s 油价 微比特 meiyuan 香港恒生指数 成交量分析 白银比例 实时行情 白银 国际石油 ltc是什么币种 美元指数走势 期货实时行情 美元兑澳元 中期选举 美元指数dini rsi指标 美金兑港币 谦益农业 硬币回收价表 今天美元走势 太一云 间谍车 加元汇率 国际石油价格 意大利国债 澳元走势预测 btc挖矿 美原油行情 即时外汇 制造业指数 澳元汇率 美国股市休市 下周美元走势 欧债 玩客云 美原油连 道琼指数 币种 美元汇率走势 文章档案 外汇止损多少 以太 挖矿 vshen 极路由hiwifi 汇丰pmi adx 美元兑日元 全球央行年会 btm 空投 安币交易所 chaobi otc交易平台 金价 标普500期货 加币汇率走势 日元兑换美元 伦敦铜价 著名财经 国际油价查询 etc 外汇学习 美债收益率 阿希币 pEE币 什么是头寸 纽交所 钻石底 德国30 799澳元 持仓报告 玩客 原油走势图 港股恒生指数 欧元下跌 420欧元 金子价格 加元走势图 1.11111E+11 xrp 美元指数k线图 金价走势预测 最新黄金价格 铜价格走势图 黄金降价 汇率欧元 金针探底 原油成本 美元 strllar 泰奇猫 圈牌 金价走势 以太币 lme铜实时行情 eos价格走势 欧元兑美金 外汇基本知识 联邦基金利率 伦敦银走势图 基本面分析 空头回补 云鱼 py6是什么货币 rsi指标详解 265万澳元 国际油价格 gateio wti原油走势图 门罗币 白银价格走势 欧盟财长会议 外汇咨询 交叉盘 外汇初学 房价指数 cbt 比特股 ltc 隐私政策 石油危机 日圆汇率 英国股市指数 原油最新价格 行情报价 自动减支 黄金市场价 全球指数 imtoken 币投资 10美金 eos币价格 相对强弱指标 黄金年走势图 美原油 加元美元 虚拟币 值多少钱 国际油价 外汇哈里森 外汇交易分析 白银价格分析 日bi btcc 标准普尔500 wti原油价格 zbcom 和币 度宇宙 技术指标分析 全球股市指数 币久 白银价格趋势 克龙 银行回收硬币 hiwifi 贝尔链 美元兑换欧元 后座议员 黄金市场行情 德拉基讲话 UES 道琼斯k线图 美元对日元 k线图分析 恒生指数 英国脱欧时间 港股指数 比特币之父 bin 今日原油 jinjia 日经225指数 比特币价格 英镑汇率 742 大立光 外汇走势 上吊线 趣步APP被调查 肖野 理财三 铜走势图 艾达 吞阳 coinex 欧元美金 赵长鹏 法郎汇率 9g游戏 英国脱欧结果 硅谷bbs 俄罗斯火星人 铜价 什么叫头寸
-
千万 明细 满满的 蛋糕 不见 磋商 广西 恶意 传神 6.1级 实物 daily怎么读 币世界快讯 优缺点 青春 献金 首相 发 1199元 联想 已致 19日 异常 12时 一平 超萌 汇率日元 实时原油价格 美国原油价格 白银行情分析 首登 一字 道歉 军报 系列化 神器 学院 500元 再度 明斯基时刻 张思聪 美元日元 阿希币 美圆指数 间谍车 贫富悬殊 3人 淑女的品格 躁动 小米 高通 班主任 好不好 5孔 英镑美元汇率 国际油价行情 传产 铜期货行情 ht币 wti原油走势图 首尔至平壤 S400 40年 部门 靓号 出来 丝路 仅数 足梦 欧盟财长会议 6000澳元 全球主要股指 achain 1名 校外 不顾 88岁 高陵区 端午 小粗 圆梦 开锣 新手机 装修 瓷砖 还是 青出于蓝 赛场 助阵 惨败 日显 11人 三个 中方 正式 8页 会议 税务 合同 商贸城 防弹 海峡 大嘴 狠话 露肩 背带 天选之子 九段 京东 国际油价预测 加拿大元汇率 gasstation 如何挖比特币 李笑来 okex solb 已兑现 澳大利亚大选 台湾股市行情 油价走势图 加拿大就业 联邦基金利率 极路由hiwifi 美元价格 全球货币战争 pai币 沙特 受伤 新时代 中青 就应 老赖 马尾 打印机 黏性 发布 铺瓷砖 沈阳 超高 闹事者 法官 六国 加征 滑稽 魔力 问题 订单 查询 下周美元走势 独股一箭 今天原油价格 欧元兑美元 外汇交易入门 财经数据 领先指标 外汇基础 耶伦讲话 后座议员 标普500期货 ltc 29美元 火币pro 波场tron 更多 技术活 怎么 学习 全面 营业 上班 罪证 欢迎 人心 港媒 规模 扩大 驱逐舰 女兵 身材 很深 雨夜 救援 中学生 门生 农场 花样 短裤 薰衣 一下 补贴 茶饮 联手 选址 盘点 变老 入网 这款 套现 获利 项目 招办 发言人 政府 买单 灵魂 考生 依法 合理 选择 实用 哪个 窍门 地面 匹克 舞台 秦岭 挑战赛 男篮 空砍 离开 横扫 出局 年近 骑行 天下 朝气 看不 闪耀 已成 突尼斯 渡船 德国 受审 重创 文件 此前 效率 国家 装甲车 计划 少将 部长 曾参加 我的 相识 连衣裙 架构 Mate 球赛 无线 三款 50块 降价 谷歌 锐龙 现身 3000 没问题 内部资料 阅卷 新思想 上一 户型 风格 一开 圆满 携旱 Comic
-
玩客币行情 美圆指数 金价格走势图 已致 币世界快讯 波场tron ok币 有了 港币兑换美元 公信宝 强征 新时代 驱逐舰 首登 一字 5400mAh 经济 千万 绿天鹅 马来西亚货币 黄金价格表 福汇外汇 huobi 美国原油价格 外汇交易分析 间谍车 不断 计划 监视 业界 明斯基时刻 房价指数 汇率日元 金条价格走势 国际石油行情 德国新闻中文 传产 道琼斯理论 加拿大就业 美元价格 德拉基讲话 玩客云 太空 全面 以色列 陆战队 部门 匹克 满满的 超高 富商 打我 闹事者 攻坚战 国家 责成 仍未 不见 开启 高层次 500元 ppi指数 黄金行情走势 6000澳元 加拿大元汇率 全球主要股指 美元日元 achain 外汇基础 外汇交易策略 美元跌下神坛 外汇入门 国际原油走势 赵长鹏 白银走势图 算力蜂 外汇交易行情 伦敦银走势图 wti原油走势图 极路由hiwifi 中币交易所 29美元 以太币 ltc是什么币种 阿希币 联合国 动员令 引发 穹顶 野蛮生长 工作人员 罪证 513部队 规模 中学生 3人 还能 小粗 滤镜 黏性 限制 写入 装修 选材 瓷砖 铺地板 还是 青出于蓝 赛场 齐聚 助阵 惨败 BOTN2018 数字 专属 连接 出现 系列化 狠话 20倍 12nm 2300X 2 班主任 神器 5孔 2199美元 黄金k线走势图 市场黄金价格 金价走势分析 英镑美元汇率 miota 国际油价行情 什么是头寸 usdollar gasstation 如何挖比特币 李笑来 diorsman 铜期货行情 fx 已兑现 新西兰货币 美国中期选举 美元实时汇率 澳大利亚大选 ht币 天然气价格 faang 吞噬太阳国语 美金兑欧元 台湾股市行情 油价走势图 日经225指数 联邦基金利率 breakeven cbt 全球货币战争 fx57 火币pro 今日复明日 ok交易所 莱茨狗 金子价格 jinjia 推荐 首尔至平壤 人心 40年 赢了 行凶 2018 几种 持续 测试版 模式 代人 铺瓷砖 沈阳 一偷 道歉 开发商 时限 军报 预期 滑稽 荣耀 结构 姐姐 过半 轻工 下周美元走势 自动减支 行情报价 今日石油价格 港币兑美元 bullish 欧元兑美元 白银交易 外汇交易入门 财经数据 领先指标 香港恒生 白银价格分析 耶伦讲话 什么叫头寸 贝尔链 技术指标分析 度宇宙 标普500期货 k线图分析 10美金 外汇止损多少 ltc 虚拟币 白银价格走势 加元汇率 gateio py6是什么货币 最新黄金价格 美债收益率 钻石底 加币汇率走势 otc交易平台 美元日元汇率 币世界 中国佬汉堡 揭幕战 1名 技术活 会为 当天 中国 欢迎 不顾 88岁 女兵 出来 婚纱照 24人 消防员 伤残 打印机 花样 圆梦 超美 猫日 连开 商家 鲜 选址 革命 海底 额达 刷屏 美元 新手机 新机 花呗 科学 大类 中考 根据 买单 扶起 精神 合理 建材