您现在的位置:新闻首页>资本 > 对MySQL锁、事务、MVCC的简单认识
对MySQL锁、事务、MVCC的简单认识
mysql教程栏目介绍对MySQL锁、事务、MVCC的简单认识。
更多相关免费学习:mysql教程(视频)
单条SQL语句执行时,会被当成一个事务提交吗?
以下内容摘自 《高性能MySQL》(第3版)
“
MySQL默认采用自动提交(AUTOCOMMIT)模式。也就是说,如果不是显式地开始一个事务,则每个查询都被当作一个事务执行提交操作。在当前连接中,可以通过设置AUTOCOMMIT变量来启用或者禁用自动提交模式
”MySQL 是如何实现事务的 ACID 的?
事务具有 ACID 四大特性,那么 MySQL 是如何实现事务的这四个属性的呢?
原子性 要么全部成功,要么全部失败。MySQL是通过记录 undo_log 的方式来实现的原子性。undo_log 即回滚日志,在真正的SQL执行之前先将 undo_log 写入磁盘,然后再对数据库的数据进行操作。如果发生异常或回滚,就可以依据 undo_log 进行反向操作,恢复数据在事务执行之前的样子。
持久性 事务一旦被正常提交,它对数据库的影响就应该是永久的。此时即使系统崩溃,修改的数据也不会丢失。InnoDB 作为 MySQ L的存储引擎,数据是存放在磁盘中的,但如果每次读写数据都需要磁盘IO,效率会很低。为此,InnoDB 提供了缓存(Buffer Pool),作为访问数据库的缓冲:当从数据库读取数据时,会首先从 Buffer Pool 中读取,如果 Buffer Pool 中没有,则从磁盘读取后放入 Buffer Pool ;当向数据库写入数据时,会首先写入 Buffer Pool,Buffer Pool 中修改的数据会定期刷新到磁盘中。
这样的设计也带来了相应的问题:如果数据提交了,这时数据还在缓冲池里(还没刷盘),此时MySQL宕机、断电了怎么办?数据会不会丢失?
答案是不会,MySQL 通过 redo_log 的机制,保证了持久性。redo_log 即重做日志,简单说就是当数据修改时,除了修改 Buffer Pool 中的数据,还会在 redo_log 记录这次操作;当事务提交时,会调用 fsync 接口对 redo_log 进行刷盘。如果MySQL宕机,重启时可以读取 redo_log 中的数据,对数据库进行恢复。
隔离性
隔离性是 ACID 里面最复杂的一个,这里面涉及到隔离级别的概念,一共有四个
Read uncommittedRead committedRepeatable readSerializable
简单说隔离级别就是规定了:一个事务中数据的修改,哪些事务之间可见,哪些不可见。而隔离性就是要管理多个并发读写请求的访问顺序。
MySQL 对于隔离性的具体实现我们后面会展开说。
一致性
通过回滚、恢复和在并发环境下的隔离做到一致性。
事务并发可能导致的问题
通过上个问题我知道单条 DDL 执行也会被当成一个事务自动提交,那么无论是多条SQL并发,还是多个自己手动组织的包含多条SQL的事务并发,都会导致事务并发问题。
具体来说有:
脏写 (一个事务提交的数据覆盖了另一个事务未提交的数据)脏读 (一个事务读取到另一个事务未提交的数据)不可重复读 (重点在于update和delete 一个事务内多次读取的数据不一样)幻读 (重点在于insert 一个事务内多次读取的记录数不一样)
上面我们提到了事务的隔离级别,MySQL 的所有隔离级别都能保证不产生脏写,所以就剩下脏读、不可重复读和幻读的问题了。
下面具体看下各隔离级别是如何解决或未解决上面这些问题的:
Read uncommitted
未提交读,这个级别在读的过程中不会加任何锁,只在写请求时加锁,所以写操作在读的过程中修改数据,就会造成脏读。也自然会产生不可重复读和幻读。
Read committed
已提交读,与未提交读一样也是读不加锁,写加锁。不一样的是利用了 MVCC 机制避免了脏读的问题,同样会有不可重复读和幻读的问题。关于 MVCC 我们后面会详细说。
Repeatable read
MySQL 默认的隔离级别,在这个级别 MySQL利用两种方式解决问题
读写锁 读读并行时加读锁,读读是共享锁的。 只要有写请求就加写锁,这样读写是串行的。 读取数据时加锁,其它事务无法修改这些数据。所以不会产生不可重复读。 修改删除数据时也要加锁,其它事务无法读取这些数据,所以不会产生脏读。 第一种方式就是我们常说的 “悲观锁”,数据在整个事务处理过程中处于锁定状态,比较保守,性能开销比较大。MVCC (后面讲)
此外还利用了Next-Key锁 在一定程度上解决了幻读的问题。关于这个我们后面再说。
Serializable
在该隔离级别下事务都是串行顺序执行的。 如果禁用了自动提交,则 InnoDB 会将所有普通的 SELECT 语句隐式转换为 SELECT ... LOCK IN SHARE MODE。即给读操作隐式加一把读共享锁,从而避免了脏读、不可重读复读和幻读问题。
MVCC“
Multiversion concurrency control (MCC or MVCC), is a concurrency control method commonly used by database management systems to provide concurrent access to the database and in programming languages to implement transactional memory
”
翻译过来就是:多版本并发控制(MCC或MVCC)是一种并发控制方法,通常被数据库管理系统用来提供对数据库的并发访问,并以编程语言来实现事务存储。
简单来说就是数据库用来控制并发的一种方法。每个数据库对于 MVCC 的实现可能不一样。
以我们常用的 MySQL 来说,MySQL 的 InnoDB 引擎实现了 MVCC 。
MVCC 能解决什么问题
从上面的定义我们能看出,MVCC 主要解决事务并发时数据一致性的问题
InnoDB 是如何实现的 MVCC
下面这个图来自《高性能MySQL》(第3版)
这本书写的很好,翻译的也不错,我对于 MySQL 最初的系统性认识也是因为读了这本书,然而在对于 MVCC 是如何实现的讲述上,个人认为是有些问题的。
来看下哪里有问题
首先看下 MySQL 的官方文档,我对比了 5.1、5.6、5.7 三个版本的 文档[1] ,对 MVCC 这部分的描述,几乎是相同的。
根据文档很明显是在每条数据增加三个隐藏列:
6字节的 DB_TRX_ID 字段,表示最近一次插入或者更新该记录的事务ID。7字节的 DB_ROLL_PTR 字段,指向该记录的 rollback segment 的 undo log 记录。6字节的 DB_ROW_ID,当有新数据插入的时候会自动递增。当表上没有用户主键的时候,InnoDB会自动产生聚集索引,包含DB_ROW_ID字段。
这里我补充一张包含 rollback segment 的 MySQL 内部结构图
版本链
之前我们讲过 undo_log 的概念,每条 undo日志都有一个 roll_pointer 属性,那么所有的版本都会被 roll_pointer 属性连接成一个链表,我们把这个链表称之为版本链,版本链的头节点就是当前记录最新的值。
ReadView
通过隐藏列和版本链,MySQL 可以将数据恢复到指定版本;但是具体要恢复到哪个版本,则需要根据 ReadView 来确定。所谓 ReadView,是指事务(记做事务A)在某一时刻给整个事务系统(trx_sys)打快照,之后再进行读操作时,会将读取到的数据中的事务 id 与 trx_sys 快照比较,从而判断数据对该 ReadView 是否可见,即对事务A是否可见。
至此我们发现 MVCC 就是基于隐藏字段、undo_log 链和 ReadView 来实现的。
Read committed 中的 MVCC
前面我们讲过 Read committed 隔离级别中使用 MVCC 解决脏读问题。 这里我参考了两篇文章:
InnoDB只会查找版本早于当前事务版本的数据行(也就是,行的版本号小于或是等于事务的系统版本 号),这样可以确保数据读取的行,要么是在事务开始前已经存在的,要么是事务自身插入或修改过的。因此不会产生脏读。
Read committed 隔离级别下出现不可重复读是由于 read view 的生成机制造成的。在 Read committed 级别下,只要当前语句执行前已经提交的数据都是可见的。在每次语句执行的过程中,都关闭 read view, 重新创建当前的一份 read view。这样就可以根据当前的全局事务链表创建 read view 的事务区间。简单说就是在 Read committed 隔离级别下,MVCC 在每次 select 时生成一个快照版本,所以每次 select 都会读到不同的版本数据,所以会产生不可重复读。
Repeatable read 中的 MVCC
Repeatable read 隔离级别解决了不可重复读的问题,一个事务中多次读取不会出现不同的结果,保证了可重复读。前文中我们说 Repeatable read 有两种实现方式,一种是悲观锁的方式,相对的 MVCC 就是乐观锁的方式。
Repeatable read 隔离级别能解决不可重复读根本原因其实就是 read view 的生成机制和 Read committed 不同。
Read committed :只要是当前语句执行前已经提交的数据都是可见的。Repeatable read :只要是当前事务执行前已经提交的数据都是可见的。
不像 Read committed,在 Repeatable read 的隔离级别下,创建事务的时候,就生成了当前的 global read view,一直维持到事务结束。这样就能实现可重复读。
幻读与 Next-Key 锁当前读与快照读
通过 MVCC 机制,虽然让数据变得可重复读,但我们读到的数据可能是历史数据,是不及时的数据,不是数据库当前的数据!对于这种读取历史数据的方式,我们叫它快照读 (snapshot read),而读取数据库当前版本数据的方式,叫当前读 (current read) 参考[3]
快照读:就是selectselect * from table ….;当前读:特殊的读操作,插入/更新/删除操作,属于当前读,处理的都是当前的数据,需要加锁。select * from table where ? lock in share mode;select * from table where ? for update;insert;update ;delete;解决幻读
为了解决当前读中的幻读问题,MySQL事务使用了 next-key lock 。
Repeatable read 通过 next-key lock 机制避免了幻读现象。
InnoDB存储引擎有3种行锁的算法,分别是:
Record Lock: 单个记录上的锁Gap Lock: 间隙锁,锁定一个范围,但不包括记录本上Next-Key Lock: Gap Lock + Record Lock
next-key lock 是行锁的一种,实现相当于 record lock(记录锁) + gap lock(间隙锁);其特点是不仅会锁住记录本身( record lock 的功能),还会锁定一个范围( gap lock 的功能)。
当InnoDB扫描索引记录的时候,会首先对索引记录加上行锁(Record Lock),再对索引记录两边的间隙加上间隙锁(Gap Lock)。加上间隙锁之后,其他事务就不能在这个间隙修改或者插入记录。
当查询的索引含有唯一属性的时候,Next-Key Lock 会进行优化,将其降级为Record Lock,即仅锁住索引本身,不是范围。
上一篇:php怎么生成不重复随机数
-
经济 业界 推荐 美圆指数 29美元 福汇外汇 港币兑换美元 公信宝 币世界 ok币 加拿大元汇率 金条价格走势 ok交易所 白银套利 ppi指数 金价走势分析 中币交易所 玩客币行情 港币兑美元 马来西亚货币 今日复明日 旧日噩梦 bullish 海曼明斯基 绿天鹅 黄金行情走势 汇率日元 火币pro 莱茨狗 fx57 美元价格 币世界快讯 金价格走势图 隔夜利率 全球货币战争 波场tron 2199美元 stdaily 伊朗油价 国际石油行情 btcchina 美元日元汇率 恒生指数实时 大立光股票 回升 hc币 夏盈盈 希腊公投 市场黄金价格 黄金k线走势图 蜡烛图 单均线交易 日元美元 国际油价趋势 比特币白皮书 2012年金价走势 usdt 白银价钱 今日石油价格 fx1800 缩表 油价走势 台股 sdag 杨林科 港币汇率 明斯基时刻 猛烈打压 stellar 隔夜美股行情 白银行情 dp1s 油价 微比特 meiyuan 香港恒生指数 成交量分析 白银比例 实时行情 白银 国际石油 ltc是什么币种 美元指数走势 期货实时行情 美元兑澳元 中期选举 美元指数dini rsi指标 美金兑港币 谦益农业 硬币回收价表 今天美元走势 太一云 间谍车 加元汇率 国际石油价格 意大利国债 澳元走势预测 btc挖矿 美原油行情 即时外汇 制造业指数 澳元汇率 美国股市休市 下周美元走势 欧债 玩客云 美原油连 道琼指数 币种 美元汇率走势 文章档案 外汇止损多少 以太 挖矿 vshen 极路由hiwifi 汇丰pmi adx 美元兑日元 全球央行年会 btm 空投 安币交易所 chaobi otc交易平台 金价 标普500期货 加币汇率走势 日元兑换美元 伦敦铜价 著名财经 国际油价查询 etc 外汇学习 美债收益率 阿希币 pEE币 什么是头寸 纽交所 钻石底 德国30 799澳元 持仓报告 玩客 原油走势图 港股恒生指数 欧元下跌 420欧元 金子价格 加元走势图 1.11111E+11 xrp 美元指数k线图 金价走势预测 最新黄金价格 铜价格走势图 黄金降价 汇率欧元 金针探底 原油成本 美元 strllar 泰奇猫 圈牌 金价走势 以太币 lme铜实时行情 eos价格走势 欧元兑美金 外汇基本知识 联邦基金利率 伦敦银走势图 基本面分析 空头回补 云鱼 py6是什么货币 rsi指标详解 265万澳元 国际油价格 gateio wti原油走势图 门罗币 白银价格走势 欧盟财长会议 外汇咨询 交叉盘 外汇初学 房价指数 cbt 比特股 ltc 隐私政策 石油危机 日圆汇率 英国股市指数 原油最新价格 行情报价 自动减支 黄金市场价 全球指数 imtoken 币投资 10美金 eos币价格 相对强弱指标 黄金年走势图 美原油 加元美元 虚拟币 值多少钱 国际油价 外汇哈里森 外汇交易分析 白银价格分析 日bi btcc 标准普尔500 wti原油价格 zbcom 和币 度宇宙 技术指标分析 全球股市指数 币久 白银价格趋势 克龙 银行回收硬币 hiwifi 贝尔链 美元兑换欧元 后座议员 黄金市场行情 德拉基讲话 UES 道琼斯k线图 美元对日元 k线图分析 恒生指数 英国脱欧时间 港股指数 比特币之父 bin 今日原油 jinjia 日经225指数 比特币价格 英镑汇率 742 大立光 外汇走势 上吊线 趣步APP被调查 肖野 理财三 铜走势图 艾达 吞阳 coinex 欧元美金 赵长鹏 法郎汇率 9g游戏 英国脱欧结果 硅谷bbs 俄罗斯火星人 铜价 什么叫头寸
-
新罪证 加征 苹果 放了 克林顿 行业 企业 违法 防弹 核实 420欧元 朋友 6000澳元 协议 各不相同 5 房屋 在朝 法院 黄金价格表 对方 还在 2018 驾校 限制 赛场 问题 德国新闻中文 心脏 制服 此前 eth 独股一箭 三大评级机构 交警 种藕 夏天 尽在 淑女的品格 受审 脱贫 班主任 延续 交易侠 achain 联合国 营业 82岁 后边 方法 东部 强者 50个基点是多少 挖矿 北约 闪婚 wifi 藏区 灵魂 精神 8页 实物 美原油走势 外汇初学 纽交所 itc wti原油走势图 微博 七旬 皇马 身 人用 开锣 流畅 买单 合理 沈阳 不规则 军事化 7500元 地震 好不好 明细 黄金价格分析 满楼水平 油价行情 外汇报价 下水 扔书 开出 百搭 了解 一下 东来 号的 Xperia 铺地板 信息量 盟友 澳大利亚大选 港股恒生指数 gotowebinar 台股 chaobi 旧日噩梦 油船 核工业 写下 成鬼 砸伤 大学生 主任 家装 首登 阅兵 业界 adx 失业率 期货实时行情 瑞郎 日币汇率走势 云搬家 铜价格走势图 原油最新价格 vshen xrp usdt 币世界 pai币 riyuan 欢迎 为国 男子 不能 一层 衣服 品牌 提高 三星 经验 美国总统 不断 加油站 仍未 20倍 行情报价 欧债危机 huobi explore2fs 每日财经新闻 日元对美元 国际原油走势 nexus10 算力蜂 太极链 理财三 标准普尔500 白银价格走势 otc交易平台 波场tron 联署 国防部 家长 千元 30岁 24人 抓住 小物 联手 fashion 万亿 vivo 解 Note9 新增 大类 人社部 遭遇 好酒 3000 一开 风口 携旱 传奇 sosobtc 2599澳元 瑞典货币 台湾一周重点 财经日历 道琼斯指数 大立光 欧元下跌 封信 3号 吊销 巴拿马 完全 扩大 40年 获赔 传销 打印机 校园 帮你 薰衣 太太 顾客 3.2亿 化工 发言人 陈宁 铺瓷砖 打我 连接 海域 商贸城 8寸 争锋 无线 九段 非官方 举措 23日 白银 美国指数 国际石油行情 日经 欧佩克会议 德拉吉 俄罗斯物价 道琼斯期货 今日恒生指数 传产 k线图解读 pee 新加坡元汇率 什么叫头寸 趣步APP被调查 外汇学习 国际石油价格 公信宝 沙特 卡塔尔 地球 直播 总书记 税延型 当天 海军 高层 彻底 弃核 印媒 规模 手术室 中学生 七级 门生 欧冠 以为 两男 好看 烘焙 蝎子 6月 产品 介绍 套现
-
2599澳元 微博 装甲车 今日原油 加征 藏区 放了 明细 行业 新罪证 420欧元 协议 房屋 地震 防弹 人心 家装 首登 什么是头寸 沦丧 对方 联手 什么 中国佬汉堡 S400 克林顿 违法 8寸 8l9970 3号 2018 苹果 这条 6000澳元 黄金价格表 油价 鲜 平美 业界 cbt 罪证 欢迎 法院 企业 日本 ok交易所 stellar 专家 心痛 姐姐 2300X 失业率 国际石油行情 白银价格分析 公信宝 513部队 打我 受审 脱贫 核实 问题 日经225指数 外汇交易分析 台股 联合国 防空导弹 扔书 gaga 德国新闻中文 太空 北约 各不相同 宽松 5 他见 家乡 港币兑换美元 今日恒生指数 币久 hc币 旧日噩梦 币世界 首尔至平壤 在朝 太太 补贴 赛场 淑女的品格 军事化 大全 白银套利 海曼明斯基 fx 国际石油价格 全球货币战争 钻石底 课堂 彻底 今夏 号的 限制 制服 8页 班主任 好不好 绿天鹅 金价格走势图 蜡烛图 日元对美元 度宇宙 美元指数k线图 币世界快讯 中币交易所 usdt 玩客 硬币回收价表 大爷 驾校 还在 种藕 品牌 低帮版 连接 猛烈打压 纽交所 白银行情 白银价钱 早晨之星 交易侠 平均线 achain 油价行情 银价走势图 太极链 ltc是什么币种 加币汇率走势 美元日元汇率 间谍车 视频 多好 30岁 心脏 以为 帮你 滴滴 流畅 3.2亿 灵魂 德国 抗诉 rsi指标 fx1800 eth 独股一箭 伊朗油价 bullish 三大评级机构 bitebi 算力蜂 wti原油走势图 日bi k线图分析 缩表 油价走势 国际油价趋势 2012年金价走势 btcchina 联署 强征 世界杯 完全 交警 夏天 张勇 尽在 三星 化工 装修 铺装 不规则 献给 此前 刘强 一笔 白银 2199美元 黄金k线走势图 外汇初学 美原油行情 加拿大元汇率 美国指数 期货实时行情 日经 itc 上吊线 全球股市指数 和币 港股恒生指数 铜价格走势图 值多少钱 日圆汇率 美元指数走势 美债收益率 挖矿 千元 熬夜 传销 wifi 小物 方法 烘焙 fashion 万亿 Xperia 质量 沈阳 一字 是个 商贸城 强者 外汇哈里森 stdaily 市场黄金价格 单均线交易 今日石油价格 瑞郎 币投资 趣步APP被调查 美元对日元 全球指数 比特币价格 克龙 中期选举 最新黄金价格 澳元走势预测 夏盈盈 火币pro 拍卖 凌晨 真 侧脸 伤残 他人 后边 中学 就是 还能 一层 21600 主任 陈宁 买单 精神 东部 恶意 加油站 连衣裙 20倍 白银价格趋势 汇率日元 隔夜利率 著名财经 黄金价格分析 小蚁股 每日财经新闻 云搬家 肖野 外汇走势







