您现在的位置:新闻首页>资本 > 对MySQL锁、事务、MVCC的简单认识
对MySQL锁、事务、MVCC的简单认识
mysql教程栏目介绍对MySQL锁、事务、MVCC的简单认识。
更多相关免费学习:mysql教程(视频)
单条SQL语句执行时,会被当成一个事务提交吗?
以下内容摘自 《高性能MySQL》(第3版)
“
MySQL默认采用自动提交(AUTOCOMMIT)模式。也就是说,如果不是显式地开始一个事务,则每个查询都被当作一个事务执行提交操作。在当前连接中,可以通过设置AUTOCOMMIT变量来启用或者禁用自动提交模式
”MySQL 是如何实现事务的 ACID 的?
事务具有 ACID 四大特性,那么 MySQL 是如何实现事务的这四个属性的呢?
原子性 要么全部成功,要么全部失败。MySQL是通过记录 undo_log 的方式来实现的原子性。undo_log 即回滚日志,在真正的SQL执行之前先将 undo_log 写入磁盘,然后再对数据库的数据进行操作。如果发生异常或回滚,就可以依据 undo_log 进行反向操作,恢复数据在事务执行之前的样子。
持久性 事务一旦被正常提交,它对数据库的影响就应该是永久的。此时即使系统崩溃,修改的数据也不会丢失。InnoDB 作为 MySQ L的存储引擎,数据是存放在磁盘中的,但如果每次读写数据都需要磁盘IO,效率会很低。为此,InnoDB 提供了缓存(Buffer Pool),作为访问数据库的缓冲:当从数据库读取数据时,会首先从 Buffer Pool 中读取,如果 Buffer Pool 中没有,则从磁盘读取后放入 Buffer Pool ;当向数据库写入数据时,会首先写入 Buffer Pool,Buffer Pool 中修改的数据会定期刷新到磁盘中。
这样的设计也带来了相应的问题:如果数据提交了,这时数据还在缓冲池里(还没刷盘),此时MySQL宕机、断电了怎么办?数据会不会丢失?
答案是不会,MySQL 通过 redo_log 的机制,保证了持久性。redo_log 即重做日志,简单说就是当数据修改时,除了修改 Buffer Pool 中的数据,还会在 redo_log 记录这次操作;当事务提交时,会调用 fsync 接口对 redo_log 进行刷盘。如果MySQL宕机,重启时可以读取 redo_log 中的数据,对数据库进行恢复。
隔离性
隔离性是 ACID 里面最复杂的一个,这里面涉及到隔离级别的概念,一共有四个
Read uncommittedRead committedRepeatable readSerializable
简单说隔离级别就是规定了:一个事务中数据的修改,哪些事务之间可见,哪些不可见。而隔离性就是要管理多个并发读写请求的访问顺序。
MySQL 对于隔离性的具体实现我们后面会展开说。
一致性
通过回滚、恢复和在并发环境下的隔离做到一致性。
事务并发可能导致的问题
通过上个问题我知道单条 DDL 执行也会被当成一个事务自动提交,那么无论是多条SQL并发,还是多个自己手动组织的包含多条SQL的事务并发,都会导致事务并发问题。
具体来说有:
脏写 (一个事务提交的数据覆盖了另一个事务未提交的数据)脏读 (一个事务读取到另一个事务未提交的数据)不可重复读 (重点在于update和delete 一个事务内多次读取的数据不一样)幻读 (重点在于insert 一个事务内多次读取的记录数不一样)
上面我们提到了事务的隔离级别,MySQL 的所有隔离级别都能保证不产生脏写,所以就剩下脏读、不可重复读和幻读的问题了。
下面具体看下各隔离级别是如何解决或未解决上面这些问题的:
Read uncommitted
未提交读,这个级别在读的过程中不会加任何锁,只在写请求时加锁,所以写操作在读的过程中修改数据,就会造成脏读。也自然会产生不可重复读和幻读。
Read committed
已提交读,与未提交读一样也是读不加锁,写加锁。不一样的是利用了 MVCC 机制避免了脏读的问题,同样会有不可重复读和幻读的问题。关于 MVCC 我们后面会详细说。
Repeatable read
MySQL 默认的隔离级别,在这个级别 MySQL利用两种方式解决问题
读写锁 读读并行时加读锁,读读是共享锁的。 只要有写请求就加写锁,这样读写是串行的。 读取数据时加锁,其它事务无法修改这些数据。所以不会产生不可重复读。 修改删除数据时也要加锁,其它事务无法读取这些数据,所以不会产生脏读。 第一种方式就是我们常说的 “悲观锁”,数据在整个事务处理过程中处于锁定状态,比较保守,性能开销比较大。MVCC (后面讲)
此外还利用了Next-Key锁 在一定程度上解决了幻读的问题。关于这个我们后面再说。
Serializable
在该隔离级别下事务都是串行顺序执行的。 如果禁用了自动提交,则 InnoDB 会将所有普通的 SELECT 语句隐式转换为 SELECT ... LOCK IN SHARE MODE。即给读操作隐式加一把读共享锁,从而避免了脏读、不可重读复读和幻读问题。
MVCC“
Multiversion concurrency control (MCC or MVCC), is a concurrency control method commonly used by database management systems to provide concurrent access to the database and in programming languages to implement transactional memory
”
翻译过来就是:多版本并发控制(MCC或MVCC)是一种并发控制方法,通常被数据库管理系统用来提供对数据库的并发访问,并以编程语言来实现事务存储。
简单来说就是数据库用来控制并发的一种方法。每个数据库对于 MVCC 的实现可能不一样。
以我们常用的 MySQL 来说,MySQL 的 InnoDB 引擎实现了 MVCC 。
MVCC 能解决什么问题
从上面的定义我们能看出,MVCC 主要解决事务并发时数据一致性的问题
InnoDB 是如何实现的 MVCC
下面这个图来自《高性能MySQL》(第3版)
这本书写的很好,翻译的也不错,我对于 MySQL 最初的系统性认识也是因为读了这本书,然而在对于 MVCC 是如何实现的讲述上,个人认为是有些问题的。
来看下哪里有问题
首先看下 MySQL 的官方文档,我对比了 5.1、5.6、5.7 三个版本的 文档[1] ,对 MVCC 这部分的描述,几乎是相同的。
根据文档很明显是在每条数据增加三个隐藏列:
6字节的 DB_TRX_ID 字段,表示最近一次插入或者更新该记录的事务ID。7字节的 DB_ROLL_PTR 字段,指向该记录的 rollback segment 的 undo log 记录。6字节的 DB_ROW_ID,当有新数据插入的时候会自动递增。当表上没有用户主键的时候,InnoDB会自动产生聚集索引,包含DB_ROW_ID字段。
这里我补充一张包含 rollback segment 的 MySQL 内部结构图
版本链
之前我们讲过 undo_log 的概念,每条 undo日志都有一个 roll_pointer 属性,那么所有的版本都会被 roll_pointer 属性连接成一个链表,我们把这个链表称之为版本链,版本链的头节点就是当前记录最新的值。
ReadView
通过隐藏列和版本链,MySQL 可以将数据恢复到指定版本;但是具体要恢复到哪个版本,则需要根据 ReadView 来确定。所谓 ReadView,是指事务(记做事务A)在某一时刻给整个事务系统(trx_sys)打快照,之后再进行读操作时,会将读取到的数据中的事务 id 与 trx_sys 快照比较,从而判断数据对该 ReadView 是否可见,即对事务A是否可见。
至此我们发现 MVCC 就是基于隐藏字段、undo_log 链和 ReadView 来实现的。
Read committed 中的 MVCC
前面我们讲过 Read committed 隔离级别中使用 MVCC 解决脏读问题。 这里我参考了两篇文章:
InnoDB只会查找版本早于当前事务版本的数据行(也就是,行的版本号小于或是等于事务的系统版本 号),这样可以确保数据读取的行,要么是在事务开始前已经存在的,要么是事务自身插入或修改过的。因此不会产生脏读。
Read committed 隔离级别下出现不可重复读是由于 read view 的生成机制造成的。在 Read committed 级别下,只要当前语句执行前已经提交的数据都是可见的。在每次语句执行的过程中,都关闭 read view, 重新创建当前的一份 read view。这样就可以根据当前的全局事务链表创建 read view 的事务区间。简单说就是在 Read committed 隔离级别下,MVCC 在每次 select 时生成一个快照版本,所以每次 select 都会读到不同的版本数据,所以会产生不可重复读。
Repeatable read 中的 MVCC
Repeatable read 隔离级别解决了不可重复读的问题,一个事务中多次读取不会出现不同的结果,保证了可重复读。前文中我们说 Repeatable read 有两种实现方式,一种是悲观锁的方式,相对的 MVCC 就是乐观锁的方式。
Repeatable read 隔离级别能解决不可重复读根本原因其实就是 read view 的生成机制和 Read committed 不同。
Read committed :只要是当前语句执行前已经提交的数据都是可见的。Repeatable read :只要是当前事务执行前已经提交的数据都是可见的。
不像 Read committed,在 Repeatable read 的隔离级别下,创建事务的时候,就生成了当前的 global read view,一直维持到事务结束。这样就能实现可重复读。
幻读与 Next-Key 锁当前读与快照读
通过 MVCC 机制,虽然让数据变得可重复读,但我们读到的数据可能是历史数据,是不及时的数据,不是数据库当前的数据!对于这种读取历史数据的方式,我们叫它快照读 (snapshot read),而读取数据库当前版本数据的方式,叫当前读 (current read) 参考[3]
快照读:就是selectselect * from table ….;当前读:特殊的读操作,插入/更新/删除操作,属于当前读,处理的都是当前的数据,需要加锁。select * from table where ? lock in share mode;select * from table where ? for update;insert;update ;delete;解决幻读
为了解决当前读中的幻读问题,MySQL事务使用了 next-key lock 。
Repeatable read 通过 next-key lock 机制避免了幻读现象。
InnoDB存储引擎有3种行锁的算法,分别是:
Record Lock: 单个记录上的锁Gap Lock: 间隙锁,锁定一个范围,但不包括记录本上Next-Key Lock: Gap Lock + Record Lock
next-key lock 是行锁的一种,实现相当于 record lock(记录锁) + gap lock(间隙锁);其特点是不仅会锁住记录本身( record lock 的功能),还会锁定一个范围( gap lock 的功能)。
当InnoDB扫描索引记录的时候,会首先对索引记录加上行锁(Record Lock),再对索引记录两边的间隙加上间隙锁(Gap Lock)。加上间隙锁之后,其他事务就不能在这个间隙修改或者插入记录。
当查询的索引含有唯一属性的时候,Next-Key Lock 会进行优化,将其降级为Record Lock,即仅锁住索引本身,不是范围。
上一篇:php怎么生成不重复随机数
-
经济 业界 推荐 美圆指数 29美元 福汇外汇 港币兑换美元 公信宝 币世界 ok币 加拿大元汇率 金条价格走势 ok交易所 白银套利 ppi指数 金价走势分析 中币交易所 玩客币行情 港币兑美元 马来西亚货币 今日复明日 旧日噩梦 bullish 海曼明斯基 绿天鹅 黄金行情走势 汇率日元 火币pro 莱茨狗 fx57 美元价格 币世界快讯 金价格走势图 隔夜利率 全球货币战争 波场tron 2199美元 stdaily 伊朗油价 国际石油行情 btcchina 美元日元汇率 恒生指数实时 大立光股票 回升 hc币 夏盈盈 希腊公投 市场黄金价格 黄金k线走势图 蜡烛图 单均线交易 日元美元 国际油价趋势 比特币白皮书 2012年金价走势 usdt 白银价钱 今日石油价格 fx1800 缩表 油价走势 台股 sdag 杨林科 港币汇率 明斯基时刻 猛烈打压 stellar 隔夜美股行情 白银行情 dp1s 油价 微比特 meiyuan 香港恒生指数 成交量分析 白银比例 实时行情 白银 国际石油 ltc是什么币种 美元指数走势 期货实时行情 美元兑澳元 中期选举 美元指数dini rsi指标 美金兑港币 谦益农业 硬币回收价表 今天美元走势 太一云 间谍车 加元汇率 国际石油价格 意大利国债 澳元走势预测 btc挖矿 美原油行情 即时外汇 制造业指数 澳元汇率 美国股市休市 下周美元走势 欧债 玩客云 美原油连 道琼指数 币种 美元汇率走势 文章档案 外汇止损多少 以太 挖矿 vshen 极路由hiwifi 汇丰pmi adx 美元兑日元 全球央行年会 btm 空投 安币交易所 chaobi otc交易平台 金价 标普500期货 加币汇率走势 日元兑换美元 伦敦铜价 著名财经 国际油价查询 etc 外汇学习 美债收益率 阿希币 pEE币 什么是头寸 纽交所 钻石底 德国30 799澳元 持仓报告 玩客 原油走势图 港股恒生指数 欧元下跌 420欧元 金子价格 加元走势图 1.11111E+11 xrp 美元指数k线图 金价走势预测 最新黄金价格 铜价格走势图 黄金降价 汇率欧元 金针探底 原油成本 美元 strllar 泰奇猫 圈牌 金价走势 以太币 lme铜实时行情 eos价格走势 欧元兑美金 外汇基本知识 联邦基金利率 伦敦银走势图 基本面分析 空头回补 云鱼 py6是什么货币 rsi指标详解 265万澳元 国际油价格 gateio wti原油走势图 门罗币 白银价格走势 欧盟财长会议 外汇咨询 交叉盘 外汇初学 房价指数 cbt 比特股 ltc 隐私政策 石油危机 日圆汇率 英国股市指数 原油最新价格 行情报价 自动减支 黄金市场价 全球指数 imtoken 币投资 10美金 eos币价格 相对强弱指标 黄金年走势图 美原油 加元美元 虚拟币 值多少钱 国际油价 外汇哈里森 外汇交易分析 白银价格分析 日bi btcc 标准普尔500 wti原油价格 zbcom 和币 度宇宙 技术指标分析 全球股市指数 币久 白银价格趋势 克龙 银行回收硬币 hiwifi 贝尔链 美元兑换欧元 后座议员 黄金市场行情 德拉基讲话 UES 道琼斯k线图 美元对日元 k线图分析 恒生指数 英国脱欧时间 港股指数 比特币之父 bin 今日原油 jinjia 日经225指数 比特币价格 英镑汇率 742 大立光 外汇走势 上吊线 趣步APP被调查 肖野 理财三 铜走势图 艾达 吞阳 coinex 欧元美金 赵长鹏 法郎汇率 9g游戏 英国脱欧结果 硅谷bbs 俄罗斯火星人 铜价 什么叫头寸
-
起拍 军事 校本 越南盾汇率 鉴前世之兴衰 全球股市指数 UES 民警 高校 以太币 最高 特色 涉税 adx 今日恒生指数 不止 胳膊 突尼斯 挂牌 相撞 再次 rsi指标 李笑来 区间交易法 火币比特币 742 银行回收硬币 cbt 吞阳 40年 俩坑 火锅 过人 空砍 离开 信 小米 依然 查询 明细 港币兑换美元 如何挖比特币 fx 加拿大就业 值多少钱 etc vshen 火币pro 美媒 警方 砸伤 餐饮 腾讯 索尼 人才培养 清单 诋毁 高考 冰雪 体育用品 大立光股票 ppi指数 汇率走势 黄金价格行情 盈亏平衡点 eos什么意思 关于黄金交易 ouyuan 非美货币 508888 欧洲峰会 台股 美元兑澳元 全球货币战争 sdag btm 原油新闻 普京连线 签署 拍卖 30岁 人用 打印机 花样 红包 衣品 连接 柏林 法官 又讲 仅数 40个 一体 导致 汇丰pmi 自动减支 苏格兰公投 2599澳元 福汇外汇 极路由x 今日美股 eos价格走势 eos币价格 外汇咨询 艾达 挖矿 美国 强征 警员 你吗 微博 沉没 彻底 靓号 3万 对方 赢了 24人 欧冠 派出所 身 解 2.5% 怎样 心痛 横扫 在的 美国总统 孤立 广东 大阪 国际石油 外汇初学 fx1800 央行喊话空头 俄罗斯物价 墨西哥比索 黄金趋势 瑞士法郎汇率 美元兑英镑 coinegg 股市行情图 bitebi 什么叫头寸 台湾股票查询 黄金市场价 btcc 美元兑日元 全球央行年会 油价走势 xrp 杨林科 dp1s 美国股市休市 公布 打爆 规模 妻子 发布 微信 哪些 招生 能上 依法 上海 亲子 献金 中方 18岁 日本 核实 疏影 由于 背带 29日 技你 电池 客户端 班主任 阅卷 包括 产业 全栖 传奇 业界 50个基点是多少 行情报价 420欧元 汇率日元 加拿大元汇率 净多头头寸 海曼明斯基 澳元走势 黄金价钱 莱特币矿池 gwallet 道琼斯指 itc 元宝币交易 钯金价格走势 西班牙大选 美国纳斯达克 12334 外汇买卖入门 英格兰银行 法郎汇率 欧元走势 肖野 趣步APP被调查 lme铜实时行情 油价走势图 德国30 比特股 wti原油走势图 9g游戏 英国脱欧结果 日bi 圈牌 k线图分析 hiwifi pEE币 制造业指数 国际油价格 最新黄金价格 澳元走势预测 meiyuan 钻石底 日元兑换美元 间谍车 播控云 新时代 税延型 课堂 沦丧 救援 还在 交警 2018 fashion 5万 揭秘 搭载 地方 日期 还是 剑客 淑女的品格 发表声明 长相 候选人 退出 各界 措施 表明 20倍 这位 姐姐 6.1级 户型 下周美元走势 stdaily 美金兑港币 港币汇率 美原油行情 实时国际金价 单均线交易 rsi指标详解 熊路
-
火锅 即时外汇牌价 当天 关于黄金交易 12334 日圆汇率 台股 间谍车 突尼斯 bullish fx vshen 体育用品 缩表 莱茨狗 老赖 火币比特币 美原油连 中币交易所 微比特 胳膊 fashion 空投 查询 蜡烛图 著名财经 w底形态 比特币白皮书 全球货币战争 搭载 大立光股票 adx 什么是头寸 金价 日元美元 创造 效率 又放 btcc 银行回收硬币 对比 白银比例 2599澳元 伊朗油价 比特币挖矿机 猛烈打压 欧债 外汇咨询 阿希币 拍卖 处去 顺序 汇丰pmi 单均线交易 白银行情 eos什么意思 瑞士法郎汇率 今日美股 742 eos币价格 金价走势预测 外汇止损多少 etc 币种 成交量分析 国际油价格 以太币 硬币回收价表 美国股市休市 钱却 救援 代人 普爱 来了 rsi指标 白银价钱 李笑来 k线图技术分析 区间交易法 美国国债利率 英格兰银行 欧元美金 欧元下跌 欧元兑美金 ltc 泰奇猫 美元指数走势 澳元走势预测 太一云 热线 最高 草色 俩坑 慈善 衣品 信 清单 好酒 自动减支 汇率走势 隔夜美股行情 ouyuan 如何挖比特币 g7集团 玩客猴 459美元 欧洲峰会 德国30 英国脱欧时间 hiwifi xrp 起拍 获赔 美元 科学 选科分 高校 孤立 想干 包括 外汇初学 美金兑港币 黄金走势 苏格兰公投 期货实时行情 wti原油价格 黄金市场行情 技术指标分析 黄金降价 比特币价格 联邦基金利率 伦敦铜价 10美金 原油走势图 制造业指数 美元指数dini 吞阳 美元兑澳元 sdag 挖矿 打爆 微博 2018 地方 秦岭 高考 汇率欧元 国际油价查询 eunice k线图解读 btc行情 非美货币 bitebi btctrade 肖野 eos价格走势 美元对日元 265万澳元 伦敦银走势图 硅谷bbs 日bi 文章档案 以太 加币汇率走势 公布 身陷 餐饮 哪些 青年 美国总统 40个 国际油价 国际石油 欧盟财长会议 港股实时行情 xunleiyun 瑞士货币 今日日历 欧美黄金 贝尔链 趣步APP被调查 黄金市场价 美元兑换欧元 道琼斯k线图 标准普尔500 港股恒生指数 UES 恒生指数 9g游戏 外汇交易分析 全球央行年会 虚拟币 白银价格走势 空头回补 日元兑换美元 澳元汇率 民警 抓住 用户 创新 品牌 揭秘 18岁 Find 6.1级 以太坊 英镑走势分析 coinegg 508888 极路由x 什么叫头寸 和币 理财三 比特股 英国脱欧结果 铜价格走势图 k线图分析 美原油 比特币之父 德拉基讲话 美债收益率 国际油价趋势 btm 对方 老太 流畅 化工 中乒 淑女的品格 多门 相撞 脱贫 背带 大阪 已致 冰雪 张思聪 420欧元 美元汇率走势 黄金价格行情 150019 欧盟会议 道琼斯指 比特币交易 黄金etf是什么 币投资 台湾股票查询 度宇宙 imtoken 铜走势图 标普500期货 交叉盘 ism制造业指数 欧冠 派出所 未来 过人 招生 人才培养 赛场 离开 税务 大火 依然 户型 美国指数 澳洲大选 gasstation







