高并發(fā)場(chǎng)景下的數(shù)據(jù)庫(kù)事務(wù)調(diào)優(yōu)

數(shù)據(jù)庫(kù)事務(wù)是訪問(wèn)可能操作各種數(shù)據(jù)項(xiàng)的一個(gè)數(shù)據(jù)庫(kù)操作序列斥滤,這些操作要么全部成功,要么全部失敗丸升。提起事務(wù)铆农,大家都知道ACID屬性,這些特性在前邊的文章里都有詳細(xì)的講解狡耻,感興趣的可以通過(guò)歷史文章查看墩剖。
在Java中有并發(fā)編程,可以多線程并發(fā)執(zhí)行夷狰,并發(fā)可以提高程序執(zhí)行的效率岭皂,也會(huì)帶來(lái)線程安全的。數(shù)據(jù)庫(kù)事務(wù)和多線程一樣沼头,為了提高數(shù)據(jù)庫(kù)處理事務(wù)的吞吐量爷绘,數(shù)據(jù)庫(kù)也支持并發(fā)事務(wù),在并發(fā)處理數(shù)據(jù)的過(guò)程中进倍,也存在著安全問(wèn)題土至。

我們本文將從并發(fā)事務(wù)可能引發(fā)的問(wèn)題、解決并發(fā)問(wèn)題猾昆、MySQL的鎖機(jī)制陶因、鎖的實(shí)現(xiàn)等方面逐漸深入,探討高并發(fā)場(chǎng)景下的事務(wù)調(diào)優(yōu)問(wèn)題垂蜗。

并發(fā)事務(wù)可能引發(fā)的問(wèn)題

1.數(shù)據(jù)丟失

2.臟讀楷扬、

3.幻讀

4.不可重復(fù)讀

事務(wù)隔離解決的并發(fā)問(wèn)題

? 數(shù)據(jù)丟失可以基于數(shù)據(jù)庫(kù)中的悲觀鎖來(lái)避免發(fā)生解幽,即在查詢(xún)時(shí)通過(guò)在事務(wù)中使用 select xx for update 語(yǔ)句來(lái)實(shí)現(xiàn)一個(gè)排他鎖,保證在該事務(wù)結(jié)束之前其他事務(wù)無(wú)法更新該數(shù)據(jù)毅否。
? 我們也可以基于樂(lè)觀鎖來(lái)避免亚铁,即將某一字段作為版本號(hào),如果更新時(shí)的版本號(hào)跟之前的版本一致螟加,則更新徘溢,否則更新失敗。剩下3 個(gè)問(wèn)題捆探,其實(shí)是數(shù)據(jù)庫(kù)讀一致性造成的然爆,需要數(shù)據(jù)庫(kù)提供一定的事務(wù)隔離機(jī)制來(lái)解決。

MySQL 的鎖機(jī)制

InnoDB實(shí)現(xiàn)了兩種類(lèi)型的鎖機(jī)制:共享鎖(S)和排他鎖(X)黍图。共享鎖允許一個(gè)事務(wù)讀數(shù)據(jù)曾雕,不允許修改數(shù)據(jù),如果其他事務(wù)要再對(duì)該行加鎖助被,只能加共享鎖剖张;排他鎖是修改數(shù)據(jù)時(shí)加的鎖,可以讀取和修改數(shù)據(jù)揩环,一旦一個(gè)事務(wù)對(duì)該行數(shù)據(jù)加鎖搔弄,其他事務(wù)將不能再對(duì)該數(shù)據(jù)加任務(wù)鎖。

不同的鎖機(jī)制會(huì)產(chǎn)生不同的事務(wù)隔離級(jí)別丰滑,不同的隔離級(jí)別分別可以解決并發(fā)事務(wù)產(chǎn)生的問(wèn)題顾犹,如讀未提交、讀已提交褒墨、可重復(fù)讀炫刷、可序列化等。(1號(hào)發(fā)的《MySQL的事務(wù)隔離級(jí)別和長(zhǎng)事務(wù)郁妈,看這一篇就夠了》一文中有介紹過(guò))

InnoDB中的讀已提交和可重復(fù)讀隔離事務(wù)是基于多版本并發(fā)控制(MVCC)實(shí)現(xiàn)高性能事務(wù)劣挫。一旦數(shù)據(jù)被加上排他鎖雳刺,其他的事務(wù)將無(wú)法加入共享鎖,且處于阻塞等待狀態(tài),如果一張表有大量的請(qǐng)求尽棕,這樣的性能將是無(wú)法支持的丁恭。

MVCC對(duì)普通的Select 不加鎖半醉,如果讀取的數(shù)據(jù)正在執(zhí)行delete或者update操作隔嫡,這時(shí)讀取操作不會(huì)等待排他鎖的釋放,而是直接利用MVCC讀取該行的數(shù)據(jù)快照书在。MVCC避免了對(duì)數(shù)據(jù)重復(fù)加鎖的過(guò)程灰伟,大大提高了毒草在的性能。(數(shù)據(jù)快照是指在該行的之前版本的數(shù)據(jù),而數(shù)據(jù)快照的版本是基于undo實(shí)現(xiàn)的栏账,undo是用來(lái)做事務(wù)回滾的帖族,記錄了回滾的不同版本的行記錄)

鎖的具體實(shí)現(xiàn)算法

InnoDB既實(shí)現(xiàn)了行鎖,也實(shí)現(xiàn)了表鎖挡爵,行鎖是通過(guò)索引實(shí)現(xiàn)的竖般,如果不通過(guò)索引條件檢索數(shù)據(jù),那么InnoDB將表中所有的記錄進(jìn)行加鎖茶鹃,其實(shí)就是升級(jí)為表鎖涣雕。

行鎖的具體實(shí)現(xiàn)算法有三種:record lock、gap lock和next-key lock闭翩。record lock是專(zhuān)門(mén)對(duì)索引項(xiàng)加鎖挣郭;gap lock是對(duì)索引項(xiàng)之間的間隙加鎖,next-key lock則是前面兩種的組合疗韵,對(duì)索引項(xiàng)及其之間的間隙加鎖兑障。

只在可重復(fù)讀或以上隔離級(jí)別下的特定操作才會(huì)取得 gap lock 或 next-key lock,在 Select 蕉汪、Update 和 Delete 時(shí)流译,除了基于唯一索引的查詢(xún)之外,其他索引查詢(xún)時(shí)都會(huì)獲取 gap lock 或 next-key lock者疤,即鎖住其掃描的范圍福澡。

優(yōu)化高并發(fā)事務(wù)

上邊的講解,都是為了對(duì)事務(wù)宛渐、鎖和隔離級(jí)別更加深入了解,下邊將聊聊高并發(fā)場(chǎng)景下的事務(wù)是如何調(diào)優(yōu)的眯搭。

  1. 結(jié)合業(yè)務(wù)場(chǎng)景窥翩,使用低級(jí)別事務(wù)隔離

在高并發(fā)業(yè)務(wù)中,為了保證業(yè)務(wù)數(shù)據(jù)的一致性鳞仙,操作數(shù)據(jù)庫(kù)時(shí)往往會(huì)使用不同級(jí)別的事務(wù)隔離寇蚊,隔離等級(jí)越高,并發(fā)性能就越低棍好。

那在實(shí)際的業(yè)務(wù)中仗岸,我們要如何選擇呢,下邊舉兩個(gè)例子:

在修改用戶(hù)的最后登錄時(shí)間借笙,或者用戶(hù)的個(gè)人資料等數(shù)據(jù)時(shí)扒怖,這些數(shù)據(jù)都只有用戶(hù)自己登錄和登陸后才會(huì)修改,不存在一個(gè)事務(wù)提交的信息被覆蓋的可能业稼,所以這樣的業(yè)務(wù)我們就最低的隔離級(jí)別盗痒。

如果賬戶(hù)的余額或者積分的消費(fèi),就可能存在多個(gè)客戶(hù)端同事消費(fèi)一個(gè)賬戶(hù)的情況低散,此時(shí)我們應(yīng)該選擇可重復(fù)讀隔離級(jí)別俯邓,來(lái)保證當(dāng)一個(gè)客戶(hù)端在操作的時(shí)候骡楼,其他客戶(hù)端不能對(duì)該數(shù)據(jù)進(jìn)行操作。

  1. 避免行鎖升級(jí)表鎖

我們知道稽鞭,InnoDB中行鎖是通過(guò)索引實(shí)現(xiàn)的鸟整,當(dāng)不通過(guò)索引條件檢索數(shù)據(jù)時(shí),行鎖就會(huì)升級(jí)成表鎖朦蕴,我們知道表鎖會(huì)嚴(yán)重影響我們對(duì)整張表的操作篮条,應(yīng)該避免這種情況。

  1. 控制事務(wù)的大小梦重,減少鎖定的資源和鎖定的時(shí)間

下邊這個(gè)SQL異常相比很多并發(fā)比較高的系統(tǒng)里都會(huì)遇見(jiàn)兑燥,比如搶購(gòu)系統(tǒng)的日志中:

MySQLQueryInterruptedException: Query execution was interrupted

由于搶購(gòu)系統(tǒng)中,提交訂單業(yè)務(wù)開(kāi)啟了事務(wù)琴拧,在并發(fā)環(huán)境中對(duì)一條記錄進(jìn)行更新操作的情況下降瞳,由于更新記錄所在的事務(wù)還可能存在其他操作,導(dǎo)致一個(gè)事務(wù)比較長(zhǎng)蚓胸,當(dāng)大量請(qǐng)求進(jìn)入時(shí)挣饥,就可能導(dǎo)致一些請(qǐng)求同時(shí)進(jìn)入事務(wù)中,由于鎖的競(jìng)爭(zhēng)是不公平的沛膳,當(dāng)多個(gè)事務(wù)同時(shí)對(duì)一條記錄進(jìn)行更新時(shí)扔枫,極端情況下,一個(gè)更新操作進(jìn)去排隊(duì)系統(tǒng)后锹安,可能會(huì)一直拿不到鎖短荐,最后因超市被系統(tǒng)中斷,就會(huì)拋出上邊這個(gè)異常叹哭。

提交訂單需要?jiǎng)?chuàng)建訂單和扣減庫(kù)存忍宋,兩種不同順序的執(zhí)行方式,結(jié)果都一樣风罩,但是性能確實(shí)不一樣的:

這兩種不同的執(zhí)行方式糠排,雖然這些操作都在一個(gè)事務(wù)中,但是鎖的申請(qǐng)不在同一時(shí)間超升,鎖只有當(dāng)其他操作都執(zhí)行完成才會(huì)釋放鎖入宦。扣減庫(kù)存是更新操作室琢,屬于行鎖乾闰,如果先扣減庫(kù)存會(huì)影響到其他操作該數(shù)據(jù)的事務(wù),所以我們應(yīng)該盡可能的避免長(zhǎng)時(shí)間持有該鎖盈滴,盡快的釋放鎖汹忠。

因?yàn)閯?chuàng)建訂單和扣除庫(kù)存不管先執(zhí)行哪一步都不影響業(yè)務(wù),所以我們可以先執(zhí)行新增操作,把扣除庫(kù)存放到最后宽菜,也就是使用執(zhí)行順序1 谣膳,來(lái)減少鎖的持有時(shí)間。

總結(jié)

MySQL 的并發(fā)事務(wù)調(diào)優(yōu)和 Java 的多線程編程調(diào)優(yōu)非常類(lèi)似铅乡,都是可以通過(guò)減小鎖粒度和減少鎖的持有時(shí)間進(jìn)行調(diào)優(yōu)继谚。在 MySQL 的并發(fā)事務(wù)調(diào)優(yōu)中,我們盡量在可以使用低事務(wù)隔離級(jí)別的業(yè)務(wù)場(chǎng)景中阵幸,避免使用高事務(wù)隔離級(jí)別花履。

在功能業(yè)務(wù)開(kāi)發(fā)時(shí),我們往往會(huì)為了追求開(kāi)發(fā)速度挚赊,習(xí)慣使用默認(rèn)的參數(shù)設(shè)置來(lái)實(shí)現(xiàn)業(yè)務(wù)功能诡壁。例如,在 service 方法中荠割,你可能習(xí)慣默認(rèn)使用 transaction妹卿,很少再手動(dòng)變更事務(wù)隔離級(jí)別。但要知道蔑鹦,transaction 默認(rèn)是 RR 事務(wù)隔離級(jí)別夺克,在某些業(yè)務(wù)場(chǎng)景下,可能并不合適嚎朽。因此铺纽,我們還是要結(jié)合具體的業(yè)務(wù)場(chǎng)景,進(jìn)行考慮哟忍。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末狡门,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子锅很,更是在濱河造成了極大的恐慌其馏,老刑警劉巖,帶你破解...
    沈念sama閱讀 212,816評(píng)論 6 492
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件粗蔚,死亡現(xiàn)場(chǎng)離奇詭異尝偎,居然都是意外死亡饶火,警方通過(guò)查閱死者的電腦和手機(jī)鹏控,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 90,729評(píng)論 3 385
  • 文/潘曉璐 我一進(jìn)店門(mén),熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái)肤寝,“玉大人当辐,你說(shuō)我怎么就攤上這事±鹂矗” “怎么了缘揪?”我有些...
    開(kāi)封第一講書(shū)人閱讀 158,300評(píng)論 0 348
  • 文/不壞的土叔 我叫張陵,是天一觀的道長(zhǎng)。 經(jīng)常有香客問(wèn)我找筝,道長(zhǎng)蹈垢,這世上最難降的妖魔是什么? 我笑而不...
    開(kāi)封第一講書(shū)人閱讀 56,780評(píng)論 1 285
  • 正文 為了忘掉前任袖裕,我火速辦了婚禮曹抬,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘急鳄。我一直安慰自己谤民,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 65,890評(píng)論 6 385
  • 文/花漫 我一把揭開(kāi)白布疾宏。 她就那樣靜靜地躺著张足,像睡著了一般。 火紅的嫁衣襯著肌膚如雪坎藐。 梳的紋絲不亂的頭發(fā)上为牍,一...
    開(kāi)封第一講書(shū)人閱讀 50,084評(píng)論 1 291
  • 那天,我揣著相機(jī)與錄音顺饮,去河邊找鬼吵聪。 笑死,一個(gè)胖子當(dāng)著我的面吹牛兼雄,可吹牛的內(nèi)容都是我干的吟逝。 我是一名探鬼主播,決...
    沈念sama閱讀 39,151評(píng)論 3 410
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼赦肋,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼块攒!你這毒婦竟也來(lái)了?” 一聲冷哼從身側(cè)響起佃乘,我...
    開(kāi)封第一講書(shū)人閱讀 37,912評(píng)論 0 268
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤囱井,失蹤者是張志新(化名)和其女友劉穎,沒(méi)想到半個(gè)月后趣避,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體庞呕,經(jīng)...
    沈念sama閱讀 44,355評(píng)論 1 303
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 36,666評(píng)論 2 327
  • 正文 我和宋清朗相戀三年程帕,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了住练。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 38,809評(píng)論 1 341
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡愁拭,死狀恐怖讲逛,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情岭埠,我是刑警寧澤盏混,帶...
    沈念sama閱讀 34,504評(píng)論 4 334
  • 正文 年R本政府宣布蔚鸥,位于F島的核電站,受9級(jí)特大地震影響许赃,放射性物質(zhì)發(fā)生泄漏止喷。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 40,150評(píng)論 3 317
  • 文/蒙蒙 一混聊、第九天 我趴在偏房一處隱蔽的房頂上張望启盛。 院中可真熱鬧,春花似錦技羔、人聲如沸僵闯。這莊子的主人今日做“春日...
    開(kāi)封第一講書(shū)人閱讀 30,882評(píng)論 0 21
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)鳖粟。三九已至,卻和暖如春拙绊,著一層夾襖步出監(jiān)牢的瞬間向图,已是汗流浹背。 一陣腳步聲響...
    開(kāi)封第一講書(shū)人閱讀 32,121評(píng)論 1 267
  • 我被黑心中介騙來(lái)泰國(guó)打工标沪, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留榄攀,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 46,628評(píng)論 2 362
  • 正文 我出身青樓金句,卻偏偏與公主長(zhǎng)得像檩赢,于是被迫代替她去往敵國(guó)和親。 傳聞我的和親對(duì)象是個(gè)殘疾皇子违寞,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 43,724評(píng)論 2 351