如何搞定MySQL锁(全局锁、表级锁、行级锁)?这篇文章告诉你答案!太TMD详细了!!!

news/2024/6/29 12:15:55 标签: java, 程序员, mysql, 数据库,

概述

是计算机协调多个进程或线程并发访问某一资源的机制。在数据库中,除传统的计算资源(CPU、RAM、I/O)的争用以外,数据也是一种供许多用户共享的资源。如何保证数据并发访问的一致性、有效性是所有数据库必须解决的一个问题,冲突也是影响数据库并发访问性能的一个重要因素。从这个角度来说,数据库而言显得尤其重要,也更加复杂。

MySQL中的,按照的粒度分,分为以下三类:

  • 全局数据库中的所有表。
  • 表级:每次操作住整张表。
  • 行级:每次操作住对应的行数据。

全局

介绍

全局就是对整个数据库实例加,加后整个实例就处于只读状态,后续的DML的写语句,DDL语句,已经更新操作的事务提交语句都将被阻塞。

其典型的使用场景是做全库的逻辑备份,对所有的表进行定,从而获取一致性视图,保证数据的完整性。

为什么全库逻辑备份,就需要加全就呢?

A. 我们一起先来分析一下不加全局,可能存在的问题。

假设在数据库中存在这样三张表: tb_stock 库存表,tb_order 订单表,tb_orderlog 订单日志表。

file

  • 在进行数据备份时,先备份了tb_stock库存表。
  • 然后接下来,在业务系统中,执行了下单操作,扣减库存,生成订单(更新tb_stock表,插入tb_order表)。
  • 然后再执行备份 tb_order表的逻辑。
  • 业务中执行插入订单日志操作。
  • 最后,又备份了tb_orderlog表。

此时备份出来的数据,是存在问题的。因为备份出来的数据,tb_stock表与tb_order表的数据不一致(有最新操作的订单信息,但是库存数没减)。

那如何来规避这种问题呢? 此时就可以借助于MySQL的全局来解决。

B. 再来分析一下加了全局后的情况

file

数据库进行进行逻辑备份之前,先对整个数据库加上全局,一旦加了全局之后,其他的DDL、DML全部都处于阻塞状态,但是可以执行DQL语句,也就是处于只读状态,而数据备份就是查询操作。那么数据在进行逻辑备份的过程中,数据库中的数据就是不会发生变化的,这样就保证了数据的一致性和完整性。

语法

  1. 加全局
flush tables with read lock;
  1. 数据备份
mysqldump -uroot –p1234 itcast > itcast.sql
  1. 释放
unlock tables;

特点

数据库中加全局,是一个比较重的操作,存在以下问题:

  • 如果在主库上备份,那么在备份期间都不能执行更新,业务基本上就得停摆。
  • 如果在从库上备份,那么在备份期间从库不能执行主库同步过来的二进制日志(binlog),会导致主从延迟。

在InnoDB引擎中,我们可以在备份时加上参数 --single-transaction 参数来完成不加的一致性数据备份。

mysqldump --single-transaction -uroot –p123456 itcast > itcast.sql

表级

介绍

表级,每次操作住整张表。定粒度大,发生冲突的概率最高,并发度最低。应用在MyISAM、InnoDB、BDB等存储引擎中。

对于表级,主要分为以下三类:

  • 元数据(meta data lock,MDL)
  • 意向

对于表,分为两类:

  • 表共享读(read lock)
  • 表独占写(write lock)

语法:

  • :lock tables 表名… read/write。
  • 释放:unlock tables / 客户端断开连接 。

特点:

A. 读

file

左侧为客户端一,对指定表加了读,不会影响右侧客户端二的读,但是会阻塞右侧客户端的写。

测试:

file

B.写

file

左侧为客户端一,对指定表加了写,会阻塞右侧客户端的读和写。

测试:

file

结论

不会阻塞其他客户端的读,但是会阻塞写。写既会阻塞其他客户端的读,又会阻塞其他客户端的写。

元数据

meta data lock , 元数据,简写MDL。

MDL加过程是系统自动控制,无需显式使用,在访问一张表的时候会自动加上。MDL主要作用是维护表元数据的数据一致性,在表上有活动事务的时候,不可以对元数据进行写入操作。为了避免DML与DDL冲突,保证读写的正确性

这里的元数据,大家可以简单理解为就是一张表的表结构。 也就是说,某一张表涉及到未提交的事务时,是不能够修改这张表的表结构的。

在MySQL5.5中引入了MDL,当对一张表进行增删改查的时候,加MDL读(共享);当对表结构进行变更操作的时候,加MDL写(排他)。

常见的SQL操作时,所添加的元数据

对应SQL类型说明
lock tables xxx read/writeSHARED_READ_ONLY / SHARED_NO_READ_WRITE
select 、select … lock in share modeSHARED_READ与SHARED_READ、SHARED_WRITE兼容,与EXCLUSIVE互斥
insert 、update、delete、select … for updateSHARED_WRITE与SHARED_READ、SHARED_WRITE兼容,与EXCLUSIVE互斥
alter table …EXCLUSIVE与其他的MDL都互斥

演示:

当执行SELECT、INSERT、UPDATE、DELETE等语句时,添加的是元数据共享(SHARED_READ / SHARED_WRITE),之间是兼容的。

file

当执行SELECT语句时,添加的是元数据共享(SHARED_READ),会阻塞元数据排他(EXCLUSIVE),之间是互斥的。

file

我们可以通过下面的SQL,来查看数据库中的元数据的情况:

select object_type,object_schema,object_name,lock_type,lock_duration from performance_schema.metadata_locks;

我们在操作过程中,可以通过上述的SQL语句,来查看元数据的加情况。

mysql> select object_type,object_schema,object_name,lock_type,lock_duration from performance_schema.metadata_locks;
+-------------+--------------------+----------------+--------------+---------------+
| object_type | object_schema      | object_name    | lock_type    | lock_duration |
+-------------+--------------------+----------------+--------------+---------------+
| TABLE       | MySQL_Advanced     | tb_user        | SHARED_READ  | TRANSACTION   |
| TABLE       | MySQL_Advanced     | tb_user        | SHARED_READ  | TRANSACTION   |
| TABLE       | MySQL_Advanced     | tb_user        | SHARED_WRITE | TRANSACTION   |
| TABLE       | MySQL_Advanced     | user_logs      | SHARED_WRITE | TRANSACTION   |
| TABLE       | performance_schema | metadata_locks | SHARED_READ  | TRANSACTION   |
+-------------+--------------------+----------------+--------------+---------------+
5 rows in set (0.00 sec)
mysql> alter table tb_user add column java int;
...阻塞
-- 另开一个客户端窗口
mysql> select object_type,object_schema,object_name,lock_type,lock_duration from performance_schema.metadata_locks;
+-------------+--------------------+------------------------+---------------------+---------------+
| object_type | object_schema      | object_name            | lock_type           | lock_duration |
+-------------+--------------------+------------------------+---------------------+---------------+
| TABLE       | MySQL_Advanced     | tb_user                | SHARED_READ         | TRANSACTION   |
| GLOBAL      | NULL               | NULL                   | INTENTION_EXCLUSIVE | STATEMENT     |
| BACKUP LOCK | NULL               | NULL                   | INTENTION_EXCLUSIVE | TRANSACTION   |
| SCHEMA      | MySQL_Advanced     | NULL                   | INTENTION_EXCLUSIVE | TRANSACTION   |
| TABLE       | MySQL_Advanced     | tb_user                | SHARED_UPGRADABLE   | TRANSACTION   |
| TABLESPACE  | NULL               | MySQL_Advanced/tb_user | INTENTION_EXCLUSIVE | TRANSACTION   |
| TRIGGER     | MySQL_Advanced     | tb_user_insert_trigger | EXCLUSIVE           | TRANSACTION   |
| TRIGGER     | MySQL_Advanced     | tb_user_update_trigger | EXCLUSIVE           | TRANSACTION   |
| TRIGGER     | MySQL_Advanced     | tb_user_delete_trigger | EXCLUSIVE           | TRANSACTION   |
| TABLE       | MySQL_Advanced     | #sql-261d_18           | EXCLUSIVE           | STATEMENT     |
| TABLE       | MySQL_Advanced     | tb_user                | EXCLUSIVE           | TRANSACTION   |
| TABLE       | performance_schema | metadata_locks         | SHARED_READ         | TRANSACTION   |
+-------------+--------------------+------------------------+---------------------+---------------+
12 rows in set (0.00 sec)

意向

  1. 介绍

为了避免DML在执行时,加的行与表的冲突,在InnoDB中引入了意向,使得表不用检查每行数据是否加,使用意向来减少表的检查。

假如没有意向,客户端一对表加了行后,客户端二如何给表加表呢,来通过示意图简单分析一下:

首先客户端一,开启一个事务,然后执行DML操作,在执行DML语句时,会对涉及到的行加行

当客户端二,想对这张表加表时,会检查当前表是否有对应的行,如果没有,则添加表,此时就会从第一行数据,检查到最后一行数据,效率较低。

file

有了意向之后 :

客户端一,在执行DML操作时,会对涉及的行加行,同时也会对该表加上意向

file

而其他客户端,在对这张表加表的时候,会根据该表上所加的意向来判定是否可以成功加表,而不用逐行判断行情况了。

file

  1. 分类
  • 意向共享(IS): 由语句select … lock in share mode添加与表共享(read)兼容,与表排他(write)互斥
  • 意向排他(IX): **由insert、update、delete、select…for update添加 **。与表共享(read)及排他(write)都互斥,意向之间不会互斥

一旦事务提交了,意向共享、意向排他,都会自动释放。

可以通过以下SQL,查看意向及行的加情况:

select object_schema,object_name,index_name,lock_type,lock_mode,lock_data from performance_schema.data_locks;

演示:

A. 意向共享与表读是兼容的

file

B. 意向排他与表读、写都是互斥的
file

行级

介绍

行级,每次操作住对应的行数据。定粒度最小,发生冲突的概率最低,并发度最高。应用在InnoDB存储引擎中。

InnoDB的数据是基于索引组织的,行是通过对索引上的索引项加来实现的,而不是对记录加的。对于行级,主要分为以下三类:

  • (Record Lock):定单个行记录的,防止其他事务对此行进行update和delete。在RC、RR隔离级别下都支持。

file

  • 间隙(Gap Lock):定索引记录间隙(不含该记录),确保索引记录间隙不变,防止其他事务在这个间隙进行insert,产生幻读。在RR隔离级别下都支持。

file

  • 临键(Next-Key Lock):行和间隙组合,同时住数据,并住数据前面的间隙Gap。在RR隔离级别下支持。

file

  1. 介绍

InnoDB实现了以下两种类型的行

  • 共享(S):允许一个事务去读一行,阻止其他事务获得相同数据集的排它
  • 排他(X):允许获取排他的事务更新数据,阻止其他事务获得相同数据集的共享和排他

两种行的兼容情况如下:

file

常见的SQL语句,在执行时,所加的行如下:

SQL类型说明
INSERT …排他自动加
UPDATE …排他自动加
DELETE …排他自动加
SELECT(正常)不加任何
SELECT … LOCK IN SHARE MODE共享需要手动在SELECT之后加LOCK IN SHARE MODE
SELECT … FOR UPDATE排他需要手动在SELECT之后加FOR UPDATE
  1. 演示

默认情况下,InnoDB在 REPEATABLE READ事务隔离级别运行,InnoDB使用 next-key 进行搜索和索引扫描,以防止幻读。

  • 针对唯一索引进行检索时,对已存在的记录进行等值匹配时,将会自动优化为行
  • InnoDB的行是针对于索引加的,不通过索引条件检索数据,那么InnoDB将对表中的所有记录加,此时 就会升级为表

可以通过以下SQL,查看意向及行的加情况:

select object_schema,object_name,index_name,lock_type,lock_mode,lock_data from performance_schema.data_locks;

示例演示

数据准备:

CREATE TABLE `stu` (
	`id` int NOT NULL PRIMARY KEY AUTO_INCREMENT,
	`name` varchar(255) DEFAULT NULL,
	`age` int NOT NULL
) ENGINE = InnoDB CHARACTER SET = utf8mb4;
INSERT INTO `stu` VALUES (1, 'tom', 1);
INSERT INTO `stu` VALUES (3, 'cat', 3);
INSERT INTO `stu` VALUES (8, 'rose', 8);
INSERT INTO `stu` VALUES (11, 'jetty', 11);
INSERT INTO `stu` VALUES (19, 'lily', 19);
INSERT INTO `stu` VALUES (25, 'luci', 25);

演示行的时候,我们就通过上面这张表来演示一下。

A. 普通的select语句,执行时,不会加

file

B. select…lock in share mode,加共享共享与共享之间兼容

file

共享与排他之间互斥。

file

客户端一获取的是id为1这行的共享,客户端二是可以获取id为3这行的排它的,因为不是同一行数据。 而如果客户端二想获取id为1这行的排他,会处于阻塞状态,以为共享与排他之间互斥。

C. 排它与排他之间互斥

file

当客户端一,执行update语句,会为id为1的记录加排他; 客户端二,如果也执行update语句更新id为1的数据,也要为id为1的数据加排他,但是客户端二会处于阻塞状态,因为排他之间是互斥的。 直到客户端一,把事务提交了,才会把这一行的行释放,此时客户端二,解除阻塞。

D. 无索引行升级为表

stu表中数据如下:

mysql> select * from stu;
+----+-----+-------+
| id | age | name  |
+----+-----+-------+
|  1 |   1 | Java  |
|  3 |   3 | Java  |
|  8 |   8 | rose  |
| 11 |  11 | jetty |
| 19 |  19 | lily  |
| 25 |  25 | luci  |
+----+-----+-------+
6 rows in set (0.00 sec)

在两个客户端中执行如下操作:

file

在客户端一中,开启事务,并执行update语句,更新name为Lily的数据,也就是id为19的记录 。然后在客户端二中更新id为3的记录,却不能直接执行,会处于阻塞状态,为什么呢?

原因就是因为此时,客户端一,根据name字段进行更新时,name字段是没有索引的,如果没有索引,此时行会升级为表(因为行是对索引项加的,而name没有索引)。

接下来,我们再针对name字段建立索引,索引建立之后,再次做一个测试:
file

此时我们可以看到,客户端一,开启事务,然后依然是根据name进行更新。而客户端二,在更新id为3的数据时,更新成功,并未进入阻塞状态。 这样就说明,我们根据索引字段进行更新操作,就可以避免行升级为表的情况。

间隙&临键

默认情况下,InnoDB在 REPEATABLE READ事务隔离级别运行,InnoDB使用 next-key 进行搜索和索引扫描,以防止幻读。

  • 索引上的等值查询(唯一索引),给不存在的记录加时, 优化为间隙
  • 索引上的等值查询(非唯一普通索引),向右遍历时最后一个值不满足查询需求时,next-key lock 退化为间隙
  • 索引上的范围查询(唯一索引)–会访问到不满足条件的第一个值为止。

注意:

间隙唯一目的是防止其他事务插入间隙。间隙可以共存,一个事务采用的间隙不会阻止另一个事务在同一间隙上采用间隙

示例演示

A. 索引上的等值查询(唯一索引),给不存在的记录加时, 优化为间隙

file

B. 索引上的等值查询(非唯一普通索引),向右遍历时最后一个值不满足查询需求时,next-key lock 退化为间隙

介绍分析一下:

我们知道InnoDB的B+树索引,叶子节点是有序的双向链表。 假如,我们要根据这个二级索引查询值为18的数据,并加上共享,我们是只定18这一行就可以了吗? 并不是,因为是非唯一索引,这个结构中可能有多个18的存在,所以,在加时会继续往后找,找到一个不满足条件的值(当前案例中也就是29)。此时会对18加临键,并对29之前的间隙加

file

file

C. 索引上的范围查询(唯一索引)–会访问到不满足条件的第一个值为止。

file

查询的条件为id>=19,并添加共享。 此时我们可以根据数据库表中现有的数据,将数据分为三个部分:

[19]

(19,25]

(25,+∞]

所以数据库数据在加是,就是将19加了行,25的临键(包含25及25之前的间隙),正无穷的临键(正无穷及之前的间隙)。

本文由传智教育博学谷狂野架构师教研团队发布。

如果本文对您有帮助,欢迎关注点赞;如果您有任何建议也可留言评论私信,您的支持是我坚持创作的动力。

转载请注明出处!


http://www.niftyadmin.cn/n/131121.html

相关文章

linux cpu飙高排查

linux定位cpu飙高原因 jpstop 定位应用进程 pidtop -Hp {pid}找到线程 tid将 tid 转换成十六进制 printf “%x\n” {tid}jstack 打印堆栈信息过滤出我们想要的 jpstop 定位应用进程 pid jps或ps -ef | grep java查看java进程id jps结果: 57152 abc.jar 83383 e…

站群服务器用处和优势是什么

站群服务器用处和优势是什么可能很多站长都认为,站群服务器已经是过时的东西,现在做站群已经没有什么用处了。其实不然,站群的作用依然超出了你的所想,站群的魅力依然吸引大多数黑帽SEO。你觉得站群没有作处,那是因为你…

合作伙伴确定过程

下销售单的时候,会由Sold—to Party(售达方)来下单。定单会有不同的Ship—to Party(送达方)。发票会走到被称为Bill—to Party(收票方)的一方,还有一方Payer(付款方&…

MySQL知识点总结(2)

目录 1、关于查询结果集的去重? 2、连接查询 3、子查询 4、union (可以将查询结果集相加) 5、limit (重点中的重点,以后分页查询全靠它了。) 6、创建表 7、insert语句插入数据 8、表的复制 9、将查询结果插入到一张表中 …

基于联咏NT96670/675/672芯片全高清记录器方案开发的产品规格参数

一、产品参数 1,主控芯片:NT96675 2,影像传感器支持Sensor:索尼323,335,307,GC2023,2053,2363 3,ROM:32Mb SPI FLASH 5,电池类型/容量:可以支持法拉电容和…

C++源码pcl1.13.0库编译环境搭建及配置

Pcl github库https://github.com/PointCloudLibrary/pcl官网地址https://pointclouds.org/Pcl exe的下载地址,各个版本,以及各版本对应的源码https://github.com/PointCloudLibrary/pcl/releases源码需要编译,编译之前安装AllInOne的exe程序&…

BUUCTF [羊城杯 2020]easyre 题解

一.查壳 64位无壳 二.主函数逻辑 可以得知flag长度为38,然后进行三次加密 第一次加密是base64加密,得到code1 第二次加密是将code1拆成四段赋给code2 第三次加密是将code2内的数字和字母移3位,其他字符不变 str2保存的是最终的加密字符 三.encode_one_base64 看到主函数…

【数据结构】单链表:头部操作我很行,插入也不用增容!!!

单链表 文章目录单链表1.链表1.1链表的概念和结构1.2链表的分类2.单链表的模拟实现2.1单链表的打印2.2单链表的尾插2.3单链表的头插2.4单链表的尾删2.5单链表的头删2.6单链表的查找2.7单链表的中间插入(在结点前插入)2.8单链表的中间删除(删除该结点)2.9单链表的中间插入(在结点…