官方定義如下:兩個事務(wù)都持有對方需要的鎖,并且在等待對方釋放,并且雙方都不會釋放自己的鎖。
10年的阜寧網(wǎng)站建設(shè)經(jīng)驗,針對設(shè)計、前端、開發(fā)、售后、文案、推廣等六對一服務(wù),響應(yīng)快,48小時及時工作處理。營銷型網(wǎng)站的優(yōu)勢是能夠根據(jù)用戶設(shè)備顯示端的尺寸不同,自動調(diào)整阜寧建站的顯示方式,使網(wǎng)站能夠適用不同顯示終端,在瀏覽器中調(diào)整網(wǎng)站的寬度,無論在任何一種瀏覽器上瀏覽網(wǎng)站,都能展現(xiàn)優(yōu)雅布局與設(shè)計,從而大程度地提升瀏覽體驗。成都創(chuàng)新互聯(lián)公司從事“阜寧網(wǎng)站設(shè)計”,“阜寧網(wǎng)站推廣”以來,每個客戶項目都認(rèn)真落實執(zhí)行。
這個就好比你有一個人質(zhì),對方有一個人質(zhì),你們倆去談判說換人。你讓對面放人,對面讓你放人。
看到這里,也許你會有這樣的疑問,事務(wù)和談判不一樣,為什么事務(wù)不能使用完鎖之后立馬釋放呢?居然還要操作完了之后一直持有鎖?這就涉及到 MySQL 的并發(fā)控制了。
MySQL的并發(fā)控制有兩種方式,一個是 MVCC,一個是兩階段鎖協(xié)議。那么為什么要并發(fā)控制呢?是因為多個用戶同時操作 MySQL 的時候,為了提高并發(fā)性能并且要求如同多個用戶的請求過來之后如同串行執(zhí)行的一樣( 可串行化調(diào)度 )。具體的并發(fā)控制這里不再展開。咱們繼續(xù)深入討論兩階段鎖協(xié)議。
官方定義:
對應(yīng)到 MySQL 上分為兩個階段:
就是說呢,只有遵循兩段鎖協(xié)議,才能實現(xiàn) 可串行化調(diào)度 。
但是兩階段鎖協(xié)議不要求事務(wù)必須一次將所有需要使用的數(shù)據(jù)加鎖,并且在加鎖階段沒有順序要求,所以這種并發(fā)控制方式會形成死鎖。
MySQL有兩種死鎖處理方式:
由于性能原因,一般都是使用死鎖檢測來進(jìn)行處理死鎖。
死鎖檢測的原理是構(gòu)建一個以事務(wù)為頂點、鎖為邊的有向圖,判斷有向圖是否存在環(huán),存在即有死鎖。
檢測到死鎖之后,選擇插入更新或者刪除的行數(shù)最少的事務(wù)回滾,基于 INFORMATION_SCHEMA.INNODB_TRX 表中的 trx_weight 字段來判斷。
MySQL如何處理死鎖
多線程開啟事務(wù)處理。每個事務(wù)有多個update操作和一個insert操作(都在同一張表)。
默認(rèn)隔離級別:Repeatable Read
只有hotel_id=2和hotel_id=11111的數(shù)據(jù)
邏輯刪除原有數(shù)據(jù)
插入新的數(shù)據(jù)
根據(jù)現(xiàn)有數(shù)據(jù)情況,update的時候沒有數(shù)據(jù)被更新
報了非常多一樣的錯
發(fā)現(xiàn)居然有死鎖。
根據(jù)常識考慮,我每個線程(事務(wù))更新的數(shù)據(jù)都不沖突,為什么會產(chǎn)生死鎖?
帶著這個問題,打印mysql最近一次的死鎖信息
show engine innodb status
顯示如下
發(fā)現(xiàn)事務(wù)1在等待一個鎖
事務(wù)2也在等待一個鎖
而且事物2持有了事物1需要的鎖
關(guān)于鎖的描述,出現(xiàn)了 lock_mode , gap before rec , insert intention 等字眼,看不懂說明了什么?說明我關(guān)于mysql的鎖相關(guān)的知識儲備還不夠。那就開始調(diào)查mysql的鎖相關(guān)知識。
通過搜索引擎,
鎖的持有兼容程度如下表
那么再回到死鎖日志,可以知道 :
事務(wù)1正在獲取插入意向鎖
事務(wù)2正在獲取插入意向鎖,持有排他gap鎖
再看我們上面的鎖兼容表格,可以知道, gap lock和insert intention lock是不兼容的
那么就可以推斷出: 事務(wù)1持有g(shù)ap lock,等待事務(wù)2的insert intention lock釋放;事務(wù)2持有g(shù)ap lock,等待事務(wù)1的insert intention lock釋放,從而導(dǎo)致死鎖。
那么新的問題就來了,事務(wù)1的intention lock 為什么會和事務(wù)2的gap lock 有交集,或者說,事務(wù)1要插入的數(shù)據(jù)的位置為什么會被事務(wù)2給鎖?。?/p>
讓我回顧一下gap lock的定義:
間隙鎖,鎖定一個范圍,但不包括記錄本身。GAP鎖的目的,是為了防止同一事務(wù)的兩次當(dāng)前讀,出現(xiàn)幻讀的情況
那為什么是gap lock,gap lock到底是基于什么邏輯鎖的記錄?發(fā)現(xiàn)自己相關(guān)的知識儲備還不夠。那就開始調(diào)查。
調(diào)查后發(fā)現(xiàn),當(dāng)當(dāng)前索引是一個 普通索引 的時候,會加一個gap lock來防止幻讀, 此gap lock 會鎖住一個左開右閉的區(qū)間。 假設(shè)索引為xx_idx(xx_id),數(shù)據(jù)分布為1,4,6,8,12,當(dāng)更新xx_id=9的時候,這個時候gap lock的鎖定記錄區(qū)間就是(8,12],也就是鎖住了xxid in (9,10,11,12)的數(shù)據(jù),當(dāng)有其他事務(wù)要插入xxid in (9,10,11,12)的數(shù)據(jù)時,就會處于等待獲取鎖的狀態(tài)。
ps:當(dāng)前索引不是普通索引,而且是唯一索引等其他情況,請參考下面資料
MySQL 加鎖處理分析
回到我自己的案例中,重新屢一下事務(wù)1的執(zhí)行過程:
因為普通索引
KEY hotel_date_idx ( hotel_id , rate_date )
的關(guān)系 這段sql會獲取一個gap lock,范圍(2,11111]
這段sql會獲取一個insert intention lock (waiting)
再看事務(wù)2的執(zhí)行過程
因為普通索引
KEY hotel_date_idx ( hotel_id , rate_date )
的關(guān)系 這段sql也會獲取一個gap lock,范圍也是(2,11111](根據(jù)前面的知識,gap lock之間會互相兼容,可以一起持有鎖的)
這段sql也會獲取一個insert intention lock (waiting)
看到這里,基本也就破案了。因為普通索引的關(guān)系,事務(wù)1和事務(wù)2的gap lock的覆蓋范圍太廣,導(dǎo)致其他事務(wù)無法插入數(shù)據(jù)。
重新梳理一下:
所以從結(jié)果來看,一堆事務(wù)被回滾,只有10007數(shù)據(jù)被更新成功
gap lock 導(dǎo)致了并發(fā)處理的死鎖
在mysql默認(rèn)的事務(wù)隔離級別(repeatable read)下,無法避免這種情況。只能把并發(fā)處理改成同步處理?;蛘邚臉I(yè)務(wù)層面做處理。
共享鎖、排他鎖、意向共享、意向排他
record lock、gap lock、next key lock、insert intention lock
show engine innodb status
索引 KEY_TSKTASK_MONTIME (STATUS_ID MON_TIME)
分析 涉及的兩條語句應(yīng)該不會涉及相同的TSK_TASK記錄 那為什么會造成死鎖呢?
查詢MySQL官網(wǎng)文檔 發(fā)現(xiàn)這跟MySQL的索引機(jī)制有關(guān) MySQL的InnoDB引擎是行級鎖 我原來的理解是直接對記錄進(jìn)行鎖定 實際上并不是這樣的
要點如下:
不是對記錄進(jìn)行鎖定 而是對索引進(jìn)行鎖定
在UPDATE DELETE操作時 MySQL不僅鎖定WHERE條件掃描過的所有索引記錄 而且會鎖定相鄰的鍵值 即所謂的next key locking
如語句UPDATE TSK_TASK SET UPDATE_TIME = NOW() WHERE ID 會鎖定所有主鍵大于等于 的所有記錄 在該語句完成之前 你就不能對主鍵等于 的記錄進(jìn)行操作
當(dāng)非簇索引(non cluster index)記錄被鎖定時 相關(guān)的簇索引(cluster index)記錄也需要被鎖定才能完成相應(yīng)的操作
再分析一下發(fā)生問題的兩條SQL語句 就不難找到問題所在了
當(dāng) update TSK_TASK set STATUS_ID= UPDATE_TIME=now () where STATUS_ID= and MON_TIME
假設(shè) update TSK_TASK set STATUS_ID= UPDATE_TIME=now () where ID in ( ) 幾乎同時執(zhí)行時 本語句首先鎖定簇索引(主鍵) 由于需要更新STATUS_ID的值 所以還需要鎖定KEY_TSKTASK_MONTIME 的某些索引記錄
這樣第一條語句鎖定了KEY_TSKTASK_MONTIME 的記錄 等待主鍵索引 而第二條語句則鎖定了主鍵索引記錄 而等待KEY_TSKTASK_MONTIME 的記錄 在此情況下 死鎖就產(chǎn)生了
筆者通過拆分第一條語句解決死鎖問題
先查出符合條件的ID select ID from TSK_TASK where STATUS_ID= and MON_TIME date_sub(now() INTERVAL minute) 然后再更新狀態(tài) update TSK_TASK set STATUS_ID= where ID in (… )
至此 死鎖問題徹底解決
lishixinzhi/Article/program/MySQL/201311/29601
鎖是需要事務(wù)結(jié)束后才釋放的。
一個是 MVCC,一個是兩階段鎖協(xié)議。
為什么要并發(fā)控制呢?是因為多個用戶同時操作 MySQL 的時候,為了提高并發(fā)性能并且要求如同多個用戶的請求過來之后如同串行執(zhí)行的一樣(為了解決臟讀、不可重復(fù)讀、幻讀)
官方定義:
兩階段鎖協(xié)議是指所有事務(wù)必須分兩個階段對數(shù)據(jù)加鎖和解鎖,在對任何數(shù)據(jù)進(jìn)行讀、寫操作之前,事務(wù)首先要獲得對該數(shù)據(jù)的封鎖;在釋放一個封鎖之后,事務(wù)不再申請和獲得任何其他封鎖。
對應(yīng)到 MySQL 上分為兩個階段:
但是兩階段鎖協(xié)議不要求事務(wù)必須一次將所有需要使用的數(shù)據(jù)加鎖(innodb在需要的索引列數(shù)據(jù)才鎖行),并且在加鎖階段沒有順序要求,所以這種并發(fā)控制方式會形成死鎖。
MySQL有兩種死鎖處理方式:
死鎖檢測 (默認(rèn)開啟)
死鎖檢測的原理是構(gòu)建一個以事務(wù)為頂點、鎖為邊的有向圖,判斷有向圖是否存在環(huán),存在即有死鎖。
回滾
檢測到死鎖之后,選擇插入更新或者刪除的行數(shù)最少的事務(wù)回滾,基于 INFORMATION_SCHEMA.INNODB_TRX 表中的 trx_weight 字段來判斷。
收集死鎖信息:
減少死鎖:
死鎖解決: