LSM-tree vs B-tree

lsm-tree vs B-tree

直覺來看驾讲,LSM-tree的優(yōu)勢在于寫性能鲸郊, B-tree的優(yōu)勢在于讀性能燕侠, 而LSM-tree可能需要檢查不同的data structure及SST才能得到.
但是, 你不該這么武斷的得出這個結(jié)論畏腕, 而是應(yīng)該通過你的具體場景做比較乘凸, 在衡量存儲引擎性能時, 這里有幾個值得思考的東西

  • LSM-tree的優(yōu)勢

    B-tree

    寫數(shù)據(jù)時党远, 每條數(shù)據(jù)至少要寫兩次: 一次是WAL削解, 一次是page 自身, 這里有額外開銷得注意: 即使一個page 只改了一個字節(jié)沟娱,寫入時候氛驮,也要寫入整個page, 在一些基于B-tree引擎中济似,為了避免在斷電情況下矫废,page的部分被更新,甚至需要寫兩次page砰蠢。

    Lsm-tree
    由于多次compaction蓖扑,需要多次重寫數(shù)據(jù),這就導(dǎo)致對數(shù)據(jù)庫的一次寫轉(zhuǎn)換化為磁盤的多次寫台舱,這在SSD上就成了隱患律杠,SSD只能進行有限次數(shù)的overwrite block

    在write-heavy application中,性能的瓶頸在database寫入磁盤的速率柿赊, 在這種情況下俩功, 寫放大對性能有直接有影響: 引擎寫入磁盤數(shù)據(jù)越多, 有限帶寬下能每秒鐘寫入的數(shù)據(jù)越少碰声。

    還有诡蜓,相比B-tree,LSM-tree更能支撐比較高的write throughout胰挑, 一部分原因在于他有更低的寫放大(雖然這個依賴引擎的配置) 蔓罚, 一部分原因在于順序?qū)慶ompact SST file,而不像B-tree那樣瞻颂,需要更新多個page豺谈。 這個不同在HDD體現(xiàn)的更加明顯(順序?qū)戇h高于隨機寫, 差距在1000)

    另外贡这,LSM-tree可以更好的進行壓縮茬末,因此可以在磁盤上產(chǎn)生更小的件, 再看B-tree, 由于fragmentation, 有些Disk space不能被使用盖矫, 由于LSM-tree不是page-oriented 的并且會不斷的做compaction, 因此LSM-tree的磁盤占有更小丽惭, 特別是在使用level compaction。

    在很多SSDs上辈双, the firmware internally uses a log-structured algorithm to turn ran‐ dom writes into sequential writes on the underlying storage chips, so the impact of the storage engine’s write pattern is less pronounced 责掏。 然而, 在SSDs 上湃望, 更低的寫放大/以及reduces fragmentation依然有優(yōu)勢: 在有限的IO帶寬下换衬, representing data more compactly allows more read and write requests

  • LSM-tree的劣勢

    1. compaction 可能會影響正在進行的read/write, 由于disk have limited resouces, 因此某些讀操作必須等到expensive compaction完成之后才能進行痰驱, 這種對throughout/average response time 影響一般很小, 但是在at the percentiles瞳浦,query的response time 有時候很高担映, 比較而言,B-tree的性能一般是穩(wěn)定的术幔。

    2. disk 的寫入帶寬被多個thread共享: logging另萤、flush湃密、compaction, 當database越來越大诅挑, 更多的帶寬被compaction占用。

    3. 如果 compaction的速率低于incoming write泛源,unmerged segments越來越多拔妥,導(dǎo)致run out of disk, 而且达箍,在讀數(shù)據(jù)時没龙, 由于需要檢查的文件越來越多,read的性能也會降低缎玫。

    4. B-tree每個key只存在一個地方硬纤,在LSM-tree,同一個key可能會存在多個文件中赃磨,這個特性是B-tree特別容易提供強事務(wù)特性筝家,

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市邻辉,隨后出現(xiàn)的幾起案子溪王,更是在濱河造成了極大的恐慌,老刑警劉巖值骇,帶你破解...
    沈念sama閱讀 217,406評論 6 503
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件莹菱,死亡現(xiàn)場離奇詭異,居然都是意外死亡吱瘩,警方通過查閱死者的電腦和手機道伟,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,732評論 3 393
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來使碾,“玉大人蜜徽,你說我怎么就攤上這事〔看” “怎么了娜汁?”我有些...
    開封第一講書人閱讀 163,711評論 0 353
  • 文/不壞的土叔 我叫張陵,是天一觀的道長兄朋。 經(jīng)常有香客問我掐禁,道長怜械,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 58,380評論 1 293
  • 正文 為了忘掉前任傅事,我火速辦了婚禮缕允,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘蹭越。我一直安慰自己障本,他們只是感情好,可當我...
    茶點故事閱讀 67,432評論 6 392
  • 文/花漫 我一把揭開白布响鹃。 她就那樣靜靜地躺著驾霜,像睡著了一般。 火紅的嫁衣襯著肌膚如雪买置。 梳的紋絲不亂的頭發(fā)上粪糙,一...
    開封第一講書人閱讀 51,301評論 1 301
  • 那天,我揣著相機與錄音忿项,去河邊找鬼蓉冈。 笑死,一個胖子當著我的面吹牛轩触,可吹牛的內(nèi)容都是我干的寞酿。 我是一名探鬼主播,決...
    沈念sama閱讀 40,145評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼脱柱,長吁一口氣:“原來是場噩夢啊……” “哼伐弹!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起褐捻,我...
    開封第一講書人閱讀 39,008評論 0 276
  • 序言:老撾萬榮一對情侶失蹤掸茅,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后柠逞,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體昧狮,經(jīng)...
    沈念sama閱讀 45,443評論 1 314
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 37,649評論 3 334
  • 正文 我和宋清朗相戀三年板壮,在試婚紗的時候發(fā)現(xiàn)自己被綠了逗鸣。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 39,795評論 1 347
  • 序言:一個原本活蹦亂跳的男人離奇死亡绰精,死狀恐怖撒璧,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情笨使,我是刑警寧澤卿樱,帶...
    沈念sama閱讀 35,501評論 5 345
  • 正文 年R本政府宣布,位于F島的核電站硫椰,受9級特大地震影響繁调,放射性物質(zhì)發(fā)生泄漏萨蚕。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點故事閱讀 41,119評論 3 328
  • 文/蒙蒙 一蹄胰、第九天 我趴在偏房一處隱蔽的房頂上張望岳遥。 院中可真熱鬧,春花似錦裕寨、人聲如沸浩蓉。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,731評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽捻艳。三九已至,卻和暖如春试和,著一層夾襖步出監(jiān)牢的瞬間讯泣,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 32,865評論 1 269
  • 我被黑心中介騙來泰國打工阅悍, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人昨稼。 一個月前我還...
    沈念sama閱讀 47,899評論 2 370
  • 正文 我出身青樓节视,卻偏偏與公主長得像,于是被迫代替她去往敵國和親假栓。 傳聞我的和親對象是個殘疾皇子寻行,可洞房花燭夜當晚...
    茶點故事閱讀 44,724評論 2 354

推薦閱讀更多精彩內(nèi)容