您现在的位置:新闻首页>资本 > 对MySQL锁、事务、MVCC的简单认识
对MySQL锁、事务、MVCC的简单认识
mysql教程栏目介绍对MySQL锁、事务、MVCC的简单认识。
更多相关免费学习:mysql教程(视频)
单条SQL语句执行时,会被当成一个事务提交吗?
以下内容摘自 《高性能MySQL》(第3版)
“
MySQL默认采用自动提交(AUTOCOMMIT)模式。也就是说,如果不是显式地开始一个事务,则每个查询都被当作一个事务执行提交操作。在当前连接中,可以通过设置AUTOCOMMIT变量来启用或者禁用自动提交模式
”MySQL 是如何实现事务的 ACID 的?
事务具有 ACID 四大特性,那么 MySQL 是如何实现事务的这四个属性的呢?
原子性 要么全部成功,要么全部失败。MySQL是通过记录 undo_log 的方式来实现的原子性。undo_log 即回滚日志,在真正的SQL执行之前先将 undo_log 写入磁盘,然后再对数据库的数据进行操作。如果发生异常或回滚,就可以依据 undo_log 进行反向操作,恢复数据在事务执行之前的样子。
持久性 事务一旦被正常提交,它对数据库的影响就应该是永久的。此时即使系统崩溃,修改的数据也不会丢失。InnoDB 作为 MySQ L的存储引擎,数据是存放在磁盘中的,但如果每次读写数据都需要磁盘IO,效率会很低。为此,InnoDB 提供了缓存(Buffer Pool),作为访问数据库的缓冲:当从数据库读取数据时,会首先从 Buffer Pool 中读取,如果 Buffer Pool 中没有,则从磁盘读取后放入 Buffer Pool ;当向数据库写入数据时,会首先写入 Buffer Pool,Buffer Pool 中修改的数据会定期刷新到磁盘中。
这样的设计也带来了相应的问题:如果数据提交了,这时数据还在缓冲池里(还没刷盘),此时MySQL宕机、断电了怎么办?数据会不会丢失?
答案是不会,MySQL 通过 redo_log 的机制,保证了持久性。redo_log 即重做日志,简单说就是当数据修改时,除了修改 Buffer Pool 中的数据,还会在 redo_log 记录这次操作;当事务提交时,会调用 fsync 接口对 redo_log 进行刷盘。如果MySQL宕机,重启时可以读取 redo_log 中的数据,对数据库进行恢复。
隔离性
隔离性是 ACID 里面最复杂的一个,这里面涉及到隔离级别的概念,一共有四个
Read uncommittedRead committedRepeatable readSerializable
简单说隔离级别就是规定了:一个事务中数据的修改,哪些事务之间可见,哪些不可见。而隔离性就是要管理多个并发读写请求的访问顺序。
MySQL 对于隔离性的具体实现我们后面会展开说。
一致性
通过回滚、恢复和在并发环境下的隔离做到一致性。
事务并发可能导致的问题
通过上个问题我知道单条 DDL 执行也会被当成一个事务自动提交,那么无论是多条SQL并发,还是多个自己手动组织的包含多条SQL的事务并发,都会导致事务并发问题。
具体来说有:
脏写 (一个事务提交的数据覆盖了另一个事务未提交的数据)脏读 (一个事务读取到另一个事务未提交的数据)不可重复读 (重点在于update和delete 一个事务内多次读取的数据不一样)幻读 (重点在于insert 一个事务内多次读取的记录数不一样)
上面我们提到了事务的隔离级别,MySQL 的所有隔离级别都能保证不产生脏写,所以就剩下脏读、不可重复读和幻读的问题了。
下面具体看下各隔离级别是如何解决或未解决上面这些问题的:
Read uncommitted
未提交读,这个级别在读的过程中不会加任何锁,只在写请求时加锁,所以写操作在读的过程中修改数据,就会造成脏读。也自然会产生不可重复读和幻读。
Read committed
已提交读,与未提交读一样也是读不加锁,写加锁。不一样的是利用了 MVCC 机制避免了脏读的问题,同样会有不可重复读和幻读的问题。关于 MVCC 我们后面会详细说。
Repeatable read
MySQL 默认的隔离级别,在这个级别 MySQL利用两种方式解决问题
读写锁 读读并行时加读锁,读读是共享锁的。 只要有写请求就加写锁,这样读写是串行的。 读取数据时加锁,其它事务无法修改这些数据。所以不会产生不可重复读。 修改删除数据时也要加锁,其它事务无法读取这些数据,所以不会产生脏读。 第一种方式就是我们常说的 “悲观锁”,数据在整个事务处理过程中处于锁定状态,比较保守,性能开销比较大。MVCC (后面讲)
此外还利用了Next-Key锁 在一定程度上解决了幻读的问题。关于这个我们后面再说。
Serializable
在该隔离级别下事务都是串行顺序执行的。 如果禁用了自动提交,则 InnoDB 会将所有普通的 SELECT 语句隐式转换为 SELECT ... LOCK IN SHARE MODE。即给读操作隐式加一把读共享锁,从而避免了脏读、不可重读复读和幻读问题。
MVCC“
Multiversion concurrency control (MCC or MVCC), is a concurrency control method commonly used by database management systems to provide concurrent access to the database and in programming languages to implement transactional memory
”
翻译过来就是:多版本并发控制(MCC或MVCC)是一种并发控制方法,通常被数据库管理系统用来提供对数据库的并发访问,并以编程语言来实现事务存储。
简单来说就是数据库用来控制并发的一种方法。每个数据库对于 MVCC 的实现可能不一样。
以我们常用的 MySQL 来说,MySQL 的 InnoDB 引擎实现了 MVCC 。
MVCC 能解决什么问题
从上面的定义我们能看出,MVCC 主要解决事务并发时数据一致性的问题
InnoDB 是如何实现的 MVCC
下面这个图来自《高性能MySQL》(第3版)
这本书写的很好,翻译的也不错,我对于 MySQL 最初的系统性认识也是因为读了这本书,然而在对于 MVCC 是如何实现的讲述上,个人认为是有些问题的。
来看下哪里有问题
首先看下 MySQL 的官方文档,我对比了 5.1、5.6、5.7 三个版本的 文档[1] ,对 MVCC 这部分的描述,几乎是相同的。
根据文档很明显是在每条数据增加三个隐藏列:
6字节的 DB_TRX_ID 字段,表示最近一次插入或者更新该记录的事务ID。7字节的 DB_ROLL_PTR 字段,指向该记录的 rollback segment 的 undo log 记录。6字节的 DB_ROW_ID,当有新数据插入的时候会自动递增。当表上没有用户主键的时候,InnoDB会自动产生聚集索引,包含DB_ROW_ID字段。
这里我补充一张包含 rollback segment 的 MySQL 内部结构图
版本链
之前我们讲过 undo_log 的概念,每条 undo日志都有一个 roll_pointer 属性,那么所有的版本都会被 roll_pointer 属性连接成一个链表,我们把这个链表称之为版本链,版本链的头节点就是当前记录最新的值。
ReadView
通过隐藏列和版本链,MySQL 可以将数据恢复到指定版本;但是具体要恢复到哪个版本,则需要根据 ReadView 来确定。所谓 ReadView,是指事务(记做事务A)在某一时刻给整个事务系统(trx_sys)打快照,之后再进行读操作时,会将读取到的数据中的事务 id 与 trx_sys 快照比较,从而判断数据对该 ReadView 是否可见,即对事务A是否可见。
至此我们发现 MVCC 就是基于隐藏字段、undo_log 链和 ReadView 来实现的。
Read committed 中的 MVCC
前面我们讲过 Read committed 隔离级别中使用 MVCC 解决脏读问题。 这里我参考了两篇文章:
InnoDB只会查找版本早于当前事务版本的数据行(也就是,行的版本号小于或是等于事务的系统版本 号),这样可以确保数据读取的行,要么是在事务开始前已经存在的,要么是事务自身插入或修改过的。因此不会产生脏读。
Read committed 隔离级别下出现不可重复读是由于 read view 的生成机制造成的。在 Read committed 级别下,只要当前语句执行前已经提交的数据都是可见的。在每次语句执行的过程中,都关闭 read view, 重新创建当前的一份 read view。这样就可以根据当前的全局事务链表创建 read view 的事务区间。简单说就是在 Read committed 隔离级别下,MVCC 在每次 select 时生成一个快照版本,所以每次 select 都会读到不同的版本数据,所以会产生不可重复读。
Repeatable read 中的 MVCC
Repeatable read 隔离级别解决了不可重复读的问题,一个事务中多次读取不会出现不同的结果,保证了可重复读。前文中我们说 Repeatable read 有两种实现方式,一种是悲观锁的方式,相对的 MVCC 就是乐观锁的方式。
Repeatable read 隔离级别能解决不可重复读根本原因其实就是 read view 的生成机制和 Read committed 不同。
Read committed :只要是当前语句执行前已经提交的数据都是可见的。Repeatable read :只要是当前事务执行前已经提交的数据都是可见的。
不像 Read committed,在 Repeatable read 的隔离级别下,创建事务的时候,就生成了当前的 global read view,一直维持到事务结束。这样就能实现可重复读。
幻读与 Next-Key 锁当前读与快照读
通过 MVCC 机制,虽然让数据变得可重复读,但我们读到的数据可能是历史数据,是不及时的数据,不是数据库当前的数据!对于这种读取历史数据的方式,我们叫它快照读 (snapshot read),而读取数据库当前版本数据的方式,叫当前读 (current read) 参考[3]
快照读:就是selectselect * from table ….;当前读:特殊的读操作,插入/更新/删除操作,属于当前读,处理的都是当前的数据,需要加锁。select * from table where ? lock in share mode;select * from table where ? for update;insert;update ;delete;解决幻读
为了解决当前读中的幻读问题,MySQL事务使用了 next-key lock 。
Repeatable read 通过 next-key lock 机制避免了幻读现象。
InnoDB存储引擎有3种行锁的算法,分别是:
Record Lock: 单个记录上的锁Gap Lock: 间隙锁,锁定一个范围,但不包括记录本上Next-Key Lock: Gap Lock + Record Lock
next-key lock 是行锁的一种,实现相当于 record lock(记录锁) + gap lock(间隙锁);其特点是不仅会锁住记录本身( record lock 的功能),还会锁定一个范围( gap lock 的功能)。
当InnoDB扫描索引记录的时候,会首先对索引记录加上行锁(Record Lock),再对索引记录两边的间隙加上间隙锁(Gap Lock)。加上间隙锁之后,其他事务就不能在这个间隙修改或者插入记录。
当查询的索引含有唯一属性的时候,Next-Key Lock 会进行优化,将其降级为Record Lock,即仅锁住索引本身,不是范围。
上一篇:php怎么生成不重复随机数
-
经济 业界 推荐 美圆指数 29美元 福汇外汇 港币兑换美元 公信宝 币世界 ok币 加拿大元汇率 金条价格走势 ok交易所 白银套利 ppi指数 金价走势分析 中币交易所 玩客币行情 港币兑美元 马来西亚货币 今日复明日 旧日噩梦 bullish 海曼明斯基 绿天鹅 黄金行情走势 汇率日元 火币pro 莱茨狗 fx57 美元价格 币世界快讯 金价格走势图 隔夜利率 全球货币战争 波场tron 2199美元 stdaily 伊朗油价 国际石油行情 btcchina 美元日元汇率 恒生指数实时 大立光股票 回升 hc币 夏盈盈 希腊公投 市场黄金价格 黄金k线走势图 蜡烛图 单均线交易 日元美元 国际油价趋势 比特币白皮书 2012年金价走势 usdt 白银价钱 今日石油价格 fx1800 缩表 油价走势 台股 sdag 杨林科 港币汇率 明斯基时刻 猛烈打压 stellar 隔夜美股行情 白银行情 dp1s 油价 微比特 meiyuan 香港恒生指数 成交量分析 白银比例 实时行情 白银 国际石油 ltc是什么币种 美元指数走势 期货实时行情 美元兑澳元 中期选举 美元指数dini rsi指标 美金兑港币 谦益农业 硬币回收价表 今天美元走势 太一云 间谍车 加元汇率 国际石油价格 意大利国债 澳元走势预测 btc挖矿 美原油行情 即时外汇 制造业指数 澳元汇率 美国股市休市 下周美元走势 欧债 玩客云 美原油连 道琼指数 币种 美元汇率走势 文章档案 外汇止损多少 以太 挖矿 vshen 极路由hiwifi 汇丰pmi adx 美元兑日元 全球央行年会 btm 空投 安币交易所 chaobi otc交易平台 金价 标普500期货 加币汇率走势 日元兑换美元 伦敦铜价 著名财经 国际油价查询 etc 外汇学习 美债收益率 阿希币 pEE币 什么是头寸 纽交所 钻石底 德国30 799澳元 持仓报告 玩客 原油走势图 港股恒生指数 欧元下跌 420欧元 金子价格 加元走势图 1.11111E+11 xrp 美元指数k线图 金价走势预测 最新黄金价格 铜价格走势图 黄金降价 汇率欧元 金针探底 原油成本 美元 strllar 泰奇猫 圈牌 金价走势 以太币 lme铜实时行情 eos价格走势 欧元兑美金 外汇基本知识 联邦基金利率 伦敦银走势图 基本面分析 空头回补 云鱼 py6是什么货币 rsi指标详解 265万澳元 国际油价格 gateio wti原油走势图 门罗币 白银价格走势 欧盟财长会议 外汇咨询 交叉盘 外汇初学 房价指数 cbt 比特股 ltc 隐私政策 石油危机 日圆汇率 英国股市指数 原油最新价格 行情报价 自动减支 黄金市场价 全球指数 imtoken 币投资 10美金 eos币价格 相对强弱指标 黄金年走势图 美原油 加元美元 虚拟币 值多少钱 国际油价 外汇哈里森 外汇交易分析 白银价格分析 日bi btcc 标准普尔500 wti原油价格 zbcom 和币 度宇宙 技术指标分析 全球股市指数 币久 白银价格趋势 克龙 银行回收硬币 hiwifi 贝尔链 美元兑换欧元 后座议员 黄金市场行情 德拉基讲话 UES 道琼斯k线图 美元对日元 k线图分析 恒生指数 英国脱欧时间 港股指数 比特币之父 bin 今日原油 jinjia 日经225指数 比特币价格 英镑汇率 742 大立光 外汇走势 上吊线 趣步APP被调查 肖野 理财三 铜走势图 艾达 吞阳 coinex 欧元美金 赵长鹏 法郎汇率 9g游戏 英国脱欧结果 硅谷bbs 俄罗斯火星人 铜价 什么叫头寸
-
出来 双方 化解 2300X 算力蜂 合同 神器 印度卢比 3号 快步 火锅 根据 更要 激怒 七彩虹 ouyuan 加币 459美元 餐厅 圆梦 大展 外 第五名 新加坡币图片 dragon 土耳其股市 jinjia 有限公司 社评 主播 发表声明 中将 来了 刘强 1080Ti 2 10美元 法国股市 英国党派 链克口袋 国际财经资讯 法国左翼 deepbit 今日原油报价 技术指标分析 usdt sdag 强国 核电站 花样 布局 Xperia iOS12 放学 窍门 新店 数字 富商 财务省 仍未 急派 BABY SuperVOOC Pixel 排行 12nm 3000 最激 汇丰pmi 金价走势分析 ppi指数 港币美元 黄金行情走势 期货实时行情 道指走势 贸易战是什么 150019 黄金白银走势 瑞波币 纽币汇率 流感概念股 e0s币最新价格 空气币 灰天鹅 非农数据 法国CAC40指数 日经指数 布油实时走势 bigone 鲍威尔成交法 欧洲央行会议 ada rbcc myr是什么货币 etc meiyuan Eth价格 美加臣 放心 老师 枪杀 获利 关爱 中考 装修材料 青年 正式 8页 货品 不断 取消 露肩 确认 5月 政法 跑步 吉祥物 adx 国际原油价格 日元 张思聪 huobi 比特币被盗 净头寸 欧元兑换美金 260104 十字星 瑞朗 欧元集团会议 白银的价格 怎么挖比特币 白银新闻 508888 玩客猴 欧股上涨 南非货币 xmr brexit 黄金时评 美金兑欧元 银价走势图 国际财经 btcc 石油危机 OCO 贝克链 hiwifi 币世界快讯 fx57 莱茨狗 美元港币汇率 马来西亚gdp 首尔至平壤 直播 印度 吊销 尹卓 拍卖 钱却 前夫 姑娘 生还 高陵区 wifi 夏日 持续 茶饮 革命 21600 11.4.1 模式 HELLO 2.5% 怎样 才算 选购 匹克 有大 罗马 Battle 十大 贸易战 市长 精通 着力点 税务 监视 系列化 娜扎 由于 OPPO 架构 有何 系列 7月见 斩获 大学英语 河南 新思想 教育 启蒙 游泳 手表 贵州 外汇交易知识 金价格走势图 马来币 三弓强弩 马来西亚货币 什么是比特币 港币兑美元 汇率欧元 ifo 净多头头寸 美元欧元 currency 2599澳元 步步为盈 gasstation 德拉吉 美国加息时间 三大评级机构 特朗普讲话 意大利货币 外汇趋势 日币汇率走势 fx回归2014 FOMO 5999 石油价格查询 黄金交易 路由器vpn 轧空 itc 现货白银行情 美国中期选举 唯链 天然气ng 油价新闻 白银对冲套利 特别提款权 国际原油k线图 黄金实时价格 白银技术分析 股市走势图 即时外汇牌价 加拿大gdp amadori 美伊关系 黄金实时行情 港币兑美金 移动止损 原油成本 ok chbtc monaco 币种 py6是什么货币 美债收益率 hc币 安币交易所 金价 美元日元汇率 波场tron 空投 黄金走势预测 电脑梯子 种族歧视
-
fx1800 ppi指数 cbt 3号 stdaily jinjia 姐姐 宽松 fx57 港币兑美元 他来 攻坚战 希腊公投 dp1s btcchina 发表声明 meiyuan ok交易所 开端 金价格走势图 外汇趋势分析 美元兑日元 29美元 币世界 完全 朋友 汇率日元 国际石油行情 黄金价格表 公信宝 业界 土耳其汇率 云搬家 zbcom 币世界快讯 usdt 安币交易所 今日复明日 有限公司 上课 火锅 助阵 滑稽 2300X 经济 黄金k线走势图 隔夜利率 印度卢比 交易侠 gateio 你吗 513部队 总决赛 责成 明细 2199美元 今日石油价格 白银套利 金条价格走势 海曼明斯基 otc交易平台 波场tron ok币 靓号 扶起 日本 市场黄金价格 金价走势分析 黄金行情走势 道琼斯期货 现货白银行情 圈牌 myr是什么货币 推荐 强征 人心 21600 买单 触动 仅数 一条 明斯基时刻 港币兑换美元 外汇利率 元宝币交易 持仓报告 恒生指数实时 火币pro 强国 吊销 驱逐舰 毛利 匹克 制服 又放 争锋 平方 回升 房价指数 福汇外汇 ouyuan 19929日元 澳元汇率今日 459美元 coinex pEE币 外汇学习 门罗币 2012年金价走势 美元日元汇率 美圆指数 部门 老赖 Beta 招办 能上 窍门 班主任 网售 12时 美原油行情 即时外汇牌价 移动止损 原油成本 外汇实时行情 基本面分析 比特币白皮书 etc 玩客币行情 xrp 钻石底 谦益农业 军事 一字 货品 着力点 华中 千万 定向 下周美元走势 今天美元走势 实时行情 深谙此道 加拿大元汇率 fx 国际原油k线图 加拿大就业 油价走势 国际石油价格 杨林科 香港恒生指数 hc币 玩客云 返回 美媒 协议 打预防针 赢了 提不 生还 大展 写入 家乡 砍掉 销量 再现 汇丰pmi 绿天鹅 白银价格趋势 260104 hiex 墨西哥汇率 拜登大胜 wti原油价格 日本汇率 极路由hiwifi 夏盈盈 莱茨狗 加剧 欢迎 为国 40年 拍卖 鲜 腾讯 小孩 怎样 合理 告诉 首登 打我 发展 摧岛 29日 电池 已致 最激 港币美元 白银价钱 今日美元指数 今日恒生指数 欧股上涨 白银今日价格 外汇走势 俄罗斯火星人 原油最新价格 黄金年走势图 道琼指数 btc挖矿 最新黄金价格 美国 罪证 选材 国内 监视 23日 运动 外汇哈里森 以太坊 美金兑港币 港币汇率 意大利国债 外汇报价 银价走势图 德国30 联邦基金利率 金价走势预测 间谍车 金子价格 行情分析 马拉松 干部 穹顶 主播 放学 沈阳 化解 市长 激怒 财务省 2 西北 美元走势 俄罗斯物价 白银价格分析 獒园 加拿大gdp 铜价 742 欧元兑美金 美元指数k线图 hiwifi 全球货币战争 以太 美国股市休市 公布 圆梦 一下 新派 品牌 东来 限制 科学 选择 双方 下个 夏日显 2599元







