MySQL InnoDB的插入緩沖特性

InnoDB存儲引擎有三大特性非常令人激動览祖,它們分別是插入緩沖膳殷、兩次寫和自適應(yīng)哈希膨疏,本篇文章介紹其中一個特性 - 插入緩沖(insert buffer)别智,在InnoDB的內(nèi)存中有單獨一塊叫“插入緩沖”的區(qū)域宗苍,下面我們詳細來介紹它。

非聚集索引寫性能問題

為了闡述非聚集索引寫性能問題薄榛,我們先來看一個例子:

mysql>create table t (

? ? ? ? ? id int auto_increment,

? ? ? ? ? name varchar(30),

? ? ? ? ? primary key (id));

我們創(chuàng)建了一個表讳窟,表的主鍵是id,id列是自增長的敞恋,即當(dāng)執(zhí)行插入操作時丽啡,id列會自動增長,頁中行記錄按id順序存放硬猫,不需要隨機讀取其它頁的數(shù)據(jù)补箍。因此,在這樣的情況下(即聚集索引)啸蜜,插入操作效率很高馏予。

但是,在大部分應(yīng)用中盔性,很少出現(xiàn)表中只有一個聚集索引的情況,更多情況下呢岗,表上會有多個非聚集的secondary index (輔助索引)冕香。比如蛹尝,對于上一張表t,業(yè)務(wù)上還需要按非唯一的name字段查找悉尾,則表定義改為:

mysql>create table t (

? ? ? ? ? id int auto_increment,

? ? ? ? ? name varchar(30),

? ? ? ? ? primary key (id),

? ? ? ? ? key (name));

這時突那,除了主鍵聚合索引外,還產(chǎn)生了一個name列的輔助索引构眯,對于該非聚集索引來說愕难,葉子節(jié)點的插入不再有序,這時就需要離散訪問非聚集索引頁惫霸,插入性能變低猫缭。

插入緩沖技術(shù)機制

為了解決這個問題,InnoDB設(shè)計出了插入緩沖技術(shù)壹店,對于非聚集類索引的插入和更新操作猜丹,不是每一次都直接插入到索引頁中,而是先插入到內(nèi)存中硅卢。具體做法是:如果該索引頁在緩沖池中射窒,直接插入;否則将塑,先將其放入插入緩沖區(qū)中脉顿,再以一定的頻率和索引頁合并,這時点寥,就可以將同一個索引頁中的多個插入合并到一個IO操作中艾疟,大大提高寫性能,master thread主線程其中的一項工作就是每秒中合并插入緩沖(可能)开财。

這個設(shè)計思路和HBase中的LSM樹有相似之處汉柒,都是通過先在內(nèi)存中修改,到達一定量后责鳍,再和磁盤中的數(shù)據(jù)合并碾褂,目的都是為了提高寫性能。

插入緩沖的啟用需要滿足一下兩個條件:

1)索引是輔助索引(secondary index)

2)索引不適合唯一的

如果輔助索引是唯一的历葛,就不能使用該技術(shù)正塌,原因很簡單,因為如果這樣做恤溶,整個索引數(shù)據(jù)被切分為2部分乓诽,無法保證唯一性。

插入緩沖帶來的問題

任何一項技術(shù)在帶來好處的同時咒程,必然也帶來壞處鸠天。插入緩沖主要帶來如下兩個壞處:

1)可能導(dǎo)致數(shù)據(jù)庫宕機后實例恢復(fù)時間變長。如果應(yīng)用程序執(zhí)行大量的插入和更新操作帐姻,且涉及非唯一的聚集索引稠集,一旦出現(xiàn)宕機奶段,這時就有大量內(nèi)存中的插入緩沖區(qū)數(shù)據(jù)沒有合并至索引頁中,導(dǎo)致實例恢復(fù)時間會很長剥纷。

2)在寫密集的情況下痹籍,插入緩沖會占用過多的緩沖池內(nèi)存,默認情況下最大可以占用1/2晦鞋,這在實際應(yīng)用中會帶來一定的問題蹲缠。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市悠垛,隨后出現(xiàn)的幾起案子线定,更是在濱河造成了極大的恐慌,老刑警劉巖鼎文,帶你破解...
    沈念sama閱讀 217,084評論 6 503
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件渔肩,死亡現(xiàn)場離奇詭異,居然都是意外死亡拇惋,警方通過查閱死者的電腦和手機周偎,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,623評論 3 392
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來撑帖,“玉大人蓉坎,你說我怎么就攤上這事『伲” “怎么了蛉艾?”我有些...
    開封第一講書人閱讀 163,450評論 0 353
  • 文/不壞的土叔 我叫張陵,是天一觀的道長衷敌。 經(jīng)常有香客問我勿侯,道長,這世上最難降的妖魔是什么缴罗? 我笑而不...
    開封第一講書人閱讀 58,322評論 1 293
  • 正文 為了忘掉前任助琐,我火速辦了婚禮,結(jié)果婚禮上面氓,老公的妹妹穿的比我還像新娘兵钮。我一直安慰自己,他們只是感情好舌界,可當(dāng)我...
    茶點故事閱讀 67,370評論 6 390
  • 文/花漫 我一把揭開白布掘譬。 她就那樣靜靜地躺著,像睡著了一般呻拌。 火紅的嫁衣襯著肌膚如雪葱轩。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 51,274評論 1 300
  • 那天,我揣著相機與錄音靴拱,去河邊找鬼复亏。 笑死,一個胖子當(dāng)著我的面吹牛缭嫡,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播抬闷,決...
    沈念sama閱讀 40,126評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼妇蛀,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了笤成?” 一聲冷哼從身側(cè)響起评架,我...
    開封第一講書人閱讀 38,980評論 0 275
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎炕泳,沒想到半個月后纵诞,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 45,414評論 1 313
  • 正文 獨居荒郊野嶺守林人離奇死亡培遵,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 37,599評論 3 334
  • 正文 我和宋清朗相戀三年浙芙,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片籽腕。...
    茶點故事閱讀 39,773評論 1 348
  • 序言:一個原本活蹦亂跳的男人離奇死亡嗡呼,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出皇耗,到底是詐尸還是另有隱情南窗,我是刑警寧澤,帶...
    沈念sama閱讀 35,470評論 5 344
  • 正文 年R本政府宣布郎楼,位于F島的核電站万伤,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏呜袁。R本人自食惡果不足惜敌买,卻給世界環(huán)境...
    茶點故事閱讀 41,080評論 3 327
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望傅寡。 院中可真熱鬧放妈,春花似錦、人聲如沸荐操。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,713評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽托启。三九已至宅倒,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間屯耸,已是汗流浹背拐迁。 一陣腳步聲響...
    開封第一講書人閱讀 32,852評論 1 269
  • 我被黑心中介騙來泰國打工蹭劈, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人线召。 一個月前我還...
    沈念sama閱讀 47,865評論 2 370
  • 正文 我出身青樓铺韧,卻偏偏與公主長得像,于是被迫代替她去往敵國和親缓淹。 傳聞我的和親對象是個殘疾皇子哈打,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 44,689評論 2 354