我的编程空间,编程开发者的网络收藏夹
学习永远不晚

MySQL 元数据锁及问题排查的解决

短信预约 -IT技能 免费直播动态提醒
省份

北京

  • 北京
  • 上海
  • 天津
  • 重庆
  • 河北
  • 山东
  • 辽宁
  • 黑龙江
  • 吉林
  • 甘肃
  • 青海
  • 河南
  • 江苏
  • 湖北
  • 湖南
  • 江西
  • 浙江
  • 广东
  • 云南
  • 福建
  • 海南
  • 山西
  • 四川
  • 陕西
  • 贵州
  • 安徽
  • 广西
  • 内蒙
  • 西藏
  • 新疆
  • 宁夏
  • 兵团
手机号立即预约

请填写图片验证码后获取短信验证码

看不清楚,换张图片

免费获取短信验证码

MySQL 元数据锁及问题排查的解决

"元数据"是用来描述数据对象定义的,而元数据锁(Metadata Lock MDL)即是加在这些定义上。通常我们认为非锁定一致性读(简单select)是不加锁的,这个是基于表内数据层面,其依然会对表的元数据加锁,保证读取数据期间表结构不会变更。

一、元数据锁简介

在事务执行过程中,mysql会对所有涉及对象的定义加上元数据锁(语句执行的时候加锁),目的是保证事务执行过程中对象定义不被修改(你不能在别人查询的时候修改表结构或者把表删了)。

对表进行DML操作时(select, update等),MySQL会对表的定义施加一个共享元数据锁(S MDL),而进行DDL操作时,会施加排他元数据锁(X MDL)。DML之间的元数据锁时不会互相阻塞的,而普通用户通常只会执行DML,他们是感知不到元数据锁的。

如果DBA在业务运行期间执行了DDL,那么DDL也会尝试获取元数据锁,在事务都很短小的时候,可能很快就获取到了。但如果有长事务阻塞了DDL,那么就有可能导致严重的问题。

示例:在会话1中执行下面SQL:

create table t1 (id int primary key auto_increment);
begin;
select * from t1;

MySQL 元数据锁及问题排查的解决

  • MySQL对DML默认是自动提交的,因此每条DML语句都是独立事务,当语句执行完,元数据锁就释放了,这里通过begin显式开启事务,让select语句执行完后,事务依然存在。

另启动一个会话2,执行下面DDL语句,可以发现其被阻塞(会话迟迟不返回):

alter table t1 add name varchar(16);

MySQL 元数据锁及问题排查的解决

  • DDL在执行前会隐式提交事务并释放元数据锁,这就是为什么要另一个会话发起DDL。

启动会话3,执行show processlist;命令,即可看到会话2在等待元数据锁(Waiting for table metadata lock):

show processlist;

MySQL 元数据锁及问题排查的解决

二、查看元数据锁

除了表,元数据锁也会加在表空间,存储过程,函数,触发器等对象上。但最常遇到的问题是我们想修改表结构,但是却被元数据锁阻塞了,导致DDL无法执行,进一步导致后续DML无法执行(业务停滞),此时需要进行人工干预。

2.1 查询元数据锁

MySQL提供了performance_schema.metadata_locks用来查询具体元数据锁信息,且默认就打开了元数据锁的信息收集,直接查询即可。表中包含了持有,等待及其他中间状态的MDL数据,当锁释放时,会从表中删除。

如果没有打开元数据锁信息收集,可以执行下面的SQL:

update performance_schema.setup_instruments
set enabled = 'YES', timed = 'YES'
where name = 'wait/lock/metadata/sql/mdl';

MySQL 元数据锁及问题排查的解决

也可以持久化写入配置文件(需要重启):

[mysqld]
performance-schema-instrument='wait/lock/metadata/sql/mdl=ON'

我们依然用第1章的示例,在执行完会话1的SQL后,另开一个会话执行下面SQL:

select 
l.object_schema 数据库名,
l.object_type 对象类型, 
l.object_name 对象名称,
l.lock_type 锁类型,
l.lock_duration 持续类型,
l.lock_status 锁状态,
l.owner_thread_id 线程ID,
t.processlist_id 会话ID,
s.sql_text
from performance_schema.metadata_locks l
join performance_schema.threads t on t.thread_id=l.owner_thread_id
join performance_schema.events_statements_current s on s.thread_id=l.owner_thread_id
where l.object_schema='test'and l.object_name='t1';

MySQL 元数据锁及问题排查的解决

  • 锁状态为granted,代表成功获取了元数据锁

随后执行会话2的DDL,再次执行查询SQL,可以看到锁状态pending(等待中):

MySQL 元数据锁及问题排查的解决

  • 通过会话ID,锁状态和SQL_Text三个字段,可以判断会话ID为4107的select语句阻塞了alter table

2.2 常见问题

元数据锁的获取是有优先级的,X锁的优先级要高于S锁。在实际生产环境中,如果一个长事务阻塞了DDL,由于其尝试获取的是X锁(优先级高),那么它还会阻止后续DML获取S锁。即:DML => DDL阻塞 =>DML阻塞,从现象上看就是表无法执行任何操作。

在上面示例的基础上,再重新开几个会话执行下面的SQL,你会发现所有类型DML都无法返回(甚至无法读):

insert into t1 values(1,'Vincent');
update t1 set name='Victor' where id=1;
delete from t1 where id=1;
select * from t1;

MySQL 元数据锁及问题排查的解决

如果生产环境出现了DDL阻塞,你的processlist可能就是下面的样子,堆积的DML会越来越多,最后挤爆线程:

show procelist;

MySQL 元数据锁及问题排查的解决

解决方案:

  • 尽量避免在业务活跃期间执行DDL,特别是有长事务的时候
  • 如果已经产生了阻塞,立刻取消DDL或将其会话kill掉,先让业务运行下去

注:Online DDL在运行过程中也会短暂地获取X锁,所以并不能解决DDL阻塞问题。

到此这篇关于MySQL 元数据锁及问题排查的解决的文章就介绍到这了,更多相关MySQL 元数据锁内容请搜索编程网(www.lsjlt.com)以前的文章或继续浏览下面的相关文章希望大家以后多多支持编程客栈(www.lsjlt.com)!

免责声明:

① 本站未注明“稿件来源”的信息均来自网络整理。其文字、图片和音视频稿件的所属权归原作者所有。本站收集整理出于非商业性的教育和科研之目的,并不意味着本站赞同其观点或证实其内容的真实性。仅作为临时的测试数据,供内部测试之用。本站并未授权任何人以任何方式主动获取本站任何信息。

② 本站未注明“稿件来源”的临时测试数据将在测试完成后最终做删除处理。有问题或投稿请发送至: 邮箱/279061341@qq.com QQ/279061341

MySQL 元数据锁及问题排查的解决

下载Word文档到电脑,方便收藏和打印~

下载Word文档

猜你喜欢

MySQL 元数据锁及问题排查的解决

目录一、元数据锁简介二、查看元数据锁2.1 查询元数据锁2.2 常见问题"元数据"是用来描述数据对象定义的,而元数据锁(Metadata Lock MDL)即是加在这些定义上。通常我们认为非锁定一致性读(简单select)是不加锁的,这个是
MySQL 元数据锁及问题排查的解决
2024-09-04

SQLServer中排查死锁及死锁问题解决

目录一、背景二、本地模拟死锁1.业务场景简介2.在本地模拟死锁1). 准备数据2).执行存储过程并观察死锁发生三、死锁的详细分析1.查看死锁报告2.分析死锁报告四、解决死锁问题 一、背景我们在UAT环境压测的时候,遇到了如下的死锁异常。
SQLServer中排查死锁及死锁问题解决
2024-08-28

mysql死锁怎么排查及解决

MySQL死锁是指两个或多个事务互相持有对方需要的资源,同时又等待对方释放资源,导致系统无法继续进行下去的情况。解决MySQL死锁问题需要进行以下步骤:1. 确认死锁:可以通过查看MySQL错误日志来确认是否发生死锁。错误日志中会记录死锁的
2023-09-21

mysql死锁排查及解决的方法是什么

MySQL死锁是指两个或多个事务相互等待对方持有的资源,导致无法继续执行的情况。为了排查和解决MySQL死锁,可以采取以下方法:1. 记录死锁信息:MySQL的日志文件中会记录死锁信息,可以通过查看错误日志或使用SHOW ENGINE IN
2023-08-16

mybatis-plus查询无数据问题及解决

这篇文章主要介绍了mybatis-plus查询无数据问题及解决方案,具有很好的参考价值,希望对大家有所帮助。如有错误或未考虑完全的地方,望不吝赐教
2022-12-08

常见的MySQL锁问题及其解决方案

MySQL 锁的常见问题与解决方案MySQL 是一种常用的关系型数据库管理系统,它使用锁来实现并发控制,保证数据的一致性和完整性。然而,MySQL 锁的使用也会带来一些问题。本文将介绍一些常见的 MySQL 锁的问题,并提供相应的解决方案。
常见的MySQL锁问题及其解决方案
2023-12-21

MyBatis-Plus查询不到数据但使用SQL可以查询到数据的问题排查解决

目录前言js一、问题描述示例代码二、排查步骤1. 检查数据源配置2. 检查实体类与数据库表结构3. 检查 Mapper 接口4. 检查 MyBATis-Plus 配置5. 排查查询条件6. 检查日志输出7. 检查数据库连接问题8. 检查全局
MyBatis-Plus查询不到数据但使用SQL可以查询到数据的问题排查解决
2024-09-20

java生产问题排查及解决方法是什么

Java生产问题排查及解决方法主要包括以下几个步骤:收集信息:当出现问题时,首先需要收集相关信息,包括错误日志、异常堆栈信息、输入输出数据、操作步骤等,这些信息有助于定位问题根源。分析日志:根据收集到的信息,分析日志文件,查看异常信息、警告
2023-10-27

tomcat 启动时卡住问题排查及解决方法

这篇文章主要介绍了tomcat 启动时卡住问题排查,本文给大家分享完美解决方法,对tomcat 启动卡住解决方法感兴趣的朋友一起看看吧
2023-03-14

mysql kill进程后出现killed死锁问题及解决

目录mysql kill进程后出现killed死锁经常会出现这样的场景场景通过下列语句查询事务情况查看表锁信息总结mysql kill进程后出现killed死锁经常会出现这样的场景有一张3亿的表,现在要对这张表进行删除1亿行,于是有人开
mysql kill进程后出现killed死锁问题及解决
2024-01-29

Discuz上传图片失败问题排查及解决方法

标题:Discuz上传图片失败问题排查及解决方法在使用Discuz论坛系统中,用户常常会遇到上传图片失败的情况,这给用户和管理员带来了不便。本文将针对Discuz上传图片失败的问题进行排查,并提供解决方法,同时给出具体的代码示例。问题排
Discuz上传图片失败问题排查及解决方法
2024-03-10

编程热搜

目录