解决一次mysql死锁问题

author author     2023-03-03     215

关键词:

参考技术A

多线程开启事务处理。每个事务有多个update操作和一个insert操作(都在同一张表)。

默认隔离级别:Repeatable Read

只有hotel_id=2和hotel_id=11111的数据

逻辑删除原有数据

插入新的数据

根据现有数据情况,update的时候没有数据被更新

报了非常多一样的错

发现居然有死锁。
根据常识考虑,我每个线程(事务)更新的数据都不冲突,为什么会产生死锁?
带着这个问题,打印mysql最近一次的死锁信息
show engine innodb status
显示如下

发现事务1在等待一个锁

事务2也在等待一个锁

而且事物2持有了事物1需要的锁

关于锁的描述,出现了 lock_mode gap before rec insert intention 等字眼,看不懂说明了什么?说明我关于mysql的锁相关的知识储备还不够。那就开始调查mysql的锁相关知识。
通过搜索引擎,

锁的持有兼容程度如下表

那么再回到死锁日志,可以知道 :

事务1正在获取插入意向锁
事务2正在获取插入意向锁,持有排他gap锁

再看我们上面的锁兼容表格,可以知道, gap lock和insert intention lock是不兼容的
那么就可以推断出: 事务1持有gap lock,等待事务2的insert intention lock释放;事务2持有gap lock,等待事务1的insert intention lock释放,从而导致死锁。
那么新的问题就来了,事务1的intention lock 为什么会和事务2的gap lock 有交集,或者说,事务1要插入的数据的位置为什么会被事务2给锁住?
让我回顾一下gap lock的定义:
间隙锁,锁定一个范围,但不包括记录本身。GAP锁的目的,是为了防止同一事务的两次当前读,出现幻读的情况
那为什么是gap lock,gap lock到底是基于什么逻辑锁的记录?发现自己相关的知识储备还不够。那就开始调查。
调查后发现,当当前索引是一个 普通索引 的时候,会加一个gap lock来防止幻读, 此gap lock 会锁住一个左开右闭的区间。 假设索引为xx_idx(xx_id),数据分布为1,4,6,8,12,当更新xx_id=9的时候,这个时候gap lock的锁定记录区间就是(8,12],也就是锁住了xxid in (9,10,11,12)的数据,当有其他事务要插入xxid in (9,10,11,12)的数据时,就会处于等待获取锁的状态。
ps:当前索引不是普通索引,而且是唯一索引等其他情况,请参考下面资料
MySQL 加锁处理分析

回到我自己的案例中,重新屡一下事务1的执行过程:

因为普通索引
KEY hotel_date_idx ( hotel_id , rate_date )
的关系 这段sql会获取一个gap lock,范围(2,11111]

这段sql会获取一个insert intention lock (waiting)

再看事务2的执行过程

因为普通索引
KEY hotel_date_idx ( hotel_id , rate_date )
的关系 这段sql也会获取一个gap lock,范围也是(2,11111](根据前面的知识,gap lock之间会互相兼容,可以一起持有锁的)

这段sql也会获取一个insert intention lock (waiting)

看到这里,基本也就破案了。因为普通索引的关系,事务1和事务2的gap lock的覆盖范围太广,导致其他事务无法插入数据。
重新梳理一下:

所以从结果来看,一堆事务被回滚,只有10007数据被更新成功

gap lock 导致了并发处理的死锁

在mysql默认的事务隔离级别(repeatable read)下,无法避免这种情况。只能把并发处理改成同步处理。或者从业务层面做处理。

共享锁、排他锁、意向共享、意向排他
record lock、gap lock、next key lock、insert intention lock
show engine innodb status

如何解决mysql中的死锁问题?

导读:虽然锁在一定程度上能够解决并发问题,但稍有不慎,就可能造成死锁。本文介绍死锁的产生及处理。作者:肖宇冰河来源:大数据DT(ID:hzdashuju)01死锁的产生和预防发生死锁的必要条件... 查看详情

如何解决mysql中的死锁问题?

导读:虽然锁在一定程度上能够解决并发问题,但稍有不慎,就可能造成死锁。本文介绍死锁的产生及处理。作者:肖宇冰河来源:大数据DT(ID:hzdashuju)01死锁的产生和预防发生死锁的必要条件... 查看详情

记录一次mysql死锁排查过程(代码片段)

背景以前接触到的数据库死锁,都是批量更新时加锁顺序不一致而导致的死锁,但是上周却遇到了一个很难理解的死锁。借着这个机会又重新学习了一下mysql的死锁知识以及常见的死锁场景。在多方调研以及和同事们的讨论下终... 查看详情

记录一次mysql死锁排查过程(代码片段)

背景以前接触到的数据库死锁,都是批量更新时加锁顺序不一致而导致的死锁,但是上周却遇到了一个很难理解的死锁。借着这个机会又重新学习了一下mysql的死锁知识以及常见的死锁场景。在多方调研以及和同事们的讨论下终... 查看详情

mysql-死锁的产生及解决方案(代码片段)

MySQL-死锁的产生及解决方案1.死锁与产生死锁的四个必要条件1.1什么是死锁1.2死锁产生的4个必要条件2.死锁案例2.1表锁死锁2.2行锁死锁2.3共享锁转换为排他锁3.死锁排查4.实例分析4.1案例描述4.2案例死锁问题复现4.3死锁排查4.4解决... 查看详情

记一次死锁问题的排查和解决

   说起来这个事情还是挺悲催的,记得上周忙的不亦乐乎,目标是改动之前另外一个团队留下来的一坨代码中的一些bug,这个项目是做OLAP分析的。分为两个模块,逻辑server主要负责一些元数据的操作,比如页面上展... 查看详情

问题解决关于mysql在上行锁并更新数据之后导致死锁问题解决

报这个错:1213-Deadlockfoundwhentryingtogetlock;tryrestartingtransactioninnodb的行锁和解锁都是针对主键索引的。如果查询时根据索引锁表,但更新时却不是通过主键更新,那么等待的解锁查询的进程将会报1213错误,程序里有... 查看详情

问题解决关于mysql在上行锁并更新数据之后导致死锁问题解决

报这个错:1213-Deadlockfoundwhentryingtogetlock;tryrestartingtransactioninnodb的行锁和解锁都是针对主键索引的。如果查询时根据索引锁表,但更新时却不是通过主键更新,那么等待的解锁查询的进程将会报1213错误,程序里有... 查看详情

手把手教你分析mysql死锁问题

...了这篇图文详细的博文,哈哈~发生死锁了,如何排查和解决呢?本文将跟你一起探讨这个问题准备好数据环境模拟死锁案发分析死锁日志分析死锁结果环境准备数据库隔离级别:​​mysql>select@@tx_isolation;​​​​+----------------... 查看详情

mysql死锁问题分析

...多,对性能目前看来也无太大影响,但还是需要解决,保不齐哪天成为性能瓶颈。   为了更系统的分析问题,本文将从死锁检测、索引隔离级别与锁 查看详情

mysql生产死锁临时解决(代码片段)

一、前言生产上发生了死锁,数据库被锁死,要怎么处理?二、执行命令1查看死锁日志showengineinnodbstatus;2查询当前繁忙的表SHOWOPENTABLESWHEREIn_use>0;3查询进程SHOWPROCESSLIST4查询死锁进程SELECTconcat('KILL',id,';')F... 查看详情

mysql深入理解全局锁和表锁解决mdl锁和死锁问题(代码片段)

说明不太深入细节,mysql的数据库可以粗略划分为global、table、row三种锁锁的种类全局锁globallock如何加锁全局锁又称为库锁,即锁住整个dbinstance.当我想让一个表read-only的时候,可以通过下面命令添加全局锁Flushtableswit... 查看详情

mysql深入理解全局锁和表锁解决mdl锁和死锁问题(代码片段)

说明不太深入细节,mysql的数据库可以粗略划分为global、table、row三种锁锁的种类全局锁globallock如何加锁全局锁又称为库锁,即锁住整个dbinstance.当我想让一个表read-only的时候,可以通过下面命令添加全局锁Flushtableswit... 查看详情

并发请求导致数据表死锁问题

...,数据表无法访问。有个不知名的猿友也遇到了该问题,解决方案也已给出,这里就不多描述,请点击下方链接查看详情。https://blog.csdn.net/guanfengliang1988/article/details/80356648 查看详情

mysql死锁:如何解决mysql死锁

可直接在mysql命令行执行:showengineinnodbstatus\G;查看造成死锁的sql语句,分析索引情况,然后优化sql然后showprocesslist;另外可以打开慢查询日志,linux下打开需在my.cnf的[mysqld]里面加上以下内容:参考技术A加锁情况与死锁原因分... 查看详情

记录一次由于logback死锁引起的生产事故

...78发现logback1.1.11有死锁问题。作者回复已在logback1.2.x已经解决。升级版本继续观察吧。 查看详情

mysql模拟死锁以及分析和解决方案(代码片段)

什么是死锁官方定义如下:两个事务都持有对方需要的锁,并且在等待对方释放,并且双方都不会释放自己的锁。这个就好比你有一个人质,对方有一个人质,你们俩去谈判说换人。你让对面放人,对面让你放人。如果处理死锁MySQL有两... 查看详情

用sql语句,怎么解决mysql数据库死锁

...它们都将无法推进下去。  表级锁不会产生死锁。所以解决死锁主要还是针对于最常用的InnoDB。  5、死锁举例分析  在MySQL中,行级锁并不是直接锁记录,而是锁索引。索引分为主键索引和非主键索引两种,如果一条sq 查看详情