InnoDB一棵B+樹可以存放多少行數(shù)據(jù)?

一個(gè)問題****1答倡、InnoDB一棵B+樹可以存放多少行數(shù)據(jù)轰传?這個(gè)問題的簡單回答是:約2千萬。2瘪撇、為****什么是這么多呢获茬?因?yàn)檫@是可以算出來的港庄。


要搞清楚這個(gè)問題,我們先從InnoDB索引數(shù)據(jù)結(jié)構(gòu)恕曲、數(shù)據(jù)組織方式說起鹏氧。
我們都知道計(jì)算機(jī)在存儲(chǔ)數(shù)據(jù)的時(shí)候,有最小存儲(chǔ)單元佩谣。在計(jì)算機(jī)中磁盤存儲(chǔ)數(shù)據(jù)最小單元是扇區(qū)把还,一個(gè)扇區(qū)的大小是512字節(jié),而文件系統(tǒng)(例如XFS/EXT4)他的最小單元是塊茸俭,一個(gè)塊的大小是4k吊履,而對于我們的InnoDB存儲(chǔ)引擎也有自己的最小儲(chǔ)存單元——頁(Page),一個(gè)頁的大小是16K瓣履。下面幾張圖可以幫你理解最小存儲(chǔ)單元:文件系統(tǒng)中一個(gè)文件大小只有1個(gè)字節(jié)率翅,但不得不占磁盤上4KB的空間。

圖片

imginnodb的所有數(shù)據(jù)文件(后綴為ibd的文件)袖迎,他的大小始終都是16384(16k)的整數(shù)倍冕臭。
圖片

img磁盤扇區(qū)、文件系統(tǒng)燕锥、InnoDB存儲(chǔ)引擎都有各自的最小存儲(chǔ)單元辜贵。
圖片

img在MySQL中我們的InnoDB頁的大小默認(rèn)是16k,當(dāng)然也可以通過參數(shù)設(shè)置:

<pre class="code-snippet__js" data-lang="ruby" style="margin: 0px; padding: 1em 1em 1em 0px; max-width: 1000%; box-sizing: border-box !important; overflow-wrap: break-word !important; overflow-x: auto; white-space: normal; -webkit-box-flex: 1; flex: 1 1 0%;">mysql> show variables like 'innodb_page_size';``+------------------+-------+``| Variable_name | Value |``+------------------+-------+``| innodb_page_size | 16384 |``+------------------+-------+``1 row in set (0.00 sec)</pre>

數(shù)據(jù)表中的數(shù)據(jù)都是存儲(chǔ)在頁中的归形,所以一個(gè)頁中能存儲(chǔ)多少行數(shù)據(jù)呢托慨?假設(shè)一行數(shù)據(jù)的大小是1k,那么一個(gè)頁可以存放16行這樣的數(shù)據(jù)暇榴。如果數(shù)據(jù)庫只按這樣的方式存儲(chǔ)厚棵,那么如何查找數(shù)據(jù)就成為一個(gè)問題剧辐,因?yàn)槲覀儾恢酪檎业臄?shù)據(jù)存在哪個(gè)頁中歉摧,也不可能把所有的頁遍歷一遍蛾号,那樣太慢了展氓。所以人們想了一個(gè)辦法,用B+樹的方式組織這些數(shù)據(jù)策治。如圖所示:

圖片

img我們先將數(shù)據(jù)記錄按主鍵進(jìn)行排序拐云,分別存放在不同的頁中(為了便于理解我們這里一個(gè)頁中只存放3條記錄田炭,實(shí)際情況可以存放很多)查吊,除了存放數(shù)據(jù)的頁以外谐区,還有存放鍵值+指針的頁,如圖中page number=3的頁逻卖,該頁存放鍵值和指向數(shù)據(jù)頁的指針宋列,這樣的頁由N個(gè)鍵值+指針組成。當(dāng)然它也是排好序的评也。這樣的數(shù)據(jù)組織形式炼杖,我們稱為索引組織表「曷常現(xiàn)在來看下,要查找一條數(shù)據(jù)嘹叫,怎么查?如:

<pre class="code-snippet__js" data-lang="sql" style="margin: 0px; padding: 1em 1em 1em 0px; max-width: 1000%; box-sizing: border-box !important; overflow-wrap: break-word !important; overflow-x: auto; white-space: normal; -webkit-box-flex: 1; flex: 1 1 0%;">select * from user where id=5;</pre>

這里id是主鍵,我們通過這棵B+樹來查找诈乒,首先找到根頁罩扇,你怎么知道user表的根頁在哪呢?其實(shí)每張表的根頁位置在表空間文件中是固定的怕磨,即page number=3的頁(這點(diǎn)我們下文還會(huì)進(jìn)一步證明)喂饥,找到根頁后通過二分查找法,定位到id=5的數(shù)據(jù)應(yīng)該在指針P5指向的頁中肠鲫,那么進(jìn)一步去page number=5的頁中查找员帮,同樣通過二分查詢法即可找到id=5的記錄:

| 5
| zhao2
| 27
|
| --- | --- | --- |
|
|
|
|

現(xiàn)在我們清楚了InnoDB中主鍵索引B+樹是如何組織數(shù)據(jù)、查詢數(shù)據(jù)的导饲,我們總結(jié)一下:

  • InnoDB存儲(chǔ)引擎的最小存儲(chǔ)單元是頁捞高,頁可以用于存放數(shù)據(jù)也可以用于存放鍵值+指針,在B+樹中葉子節(jié)點(diǎn)存放數(shù)據(jù)渣锦,非葉子節(jié)點(diǎn)存放鍵值+指針硝岗。

  • 索引組織表通過非葉子節(jié)點(diǎn)的二分查找法以及指針確定數(shù)據(jù)在哪個(gè)頁中,進(jìn)而在去數(shù)據(jù)頁中查找到需要的數(shù)據(jù)袋毙;

那么回到我們開始的問題型檀,通常一棵B+樹可以存放多少行數(shù)據(jù)?這里我們先假設(shè)B+樹高為2听盖,即存在一個(gè)根節(jié)點(diǎn)和若干個(gè)葉子節(jié)點(diǎn)胀溺,那么這棵B+樹的存放總記錄數(shù)為:根節(jié)點(diǎn)指針數(shù)單個(gè)葉子節(jié)點(diǎn)記錄行數(shù)。上文我們已經(jīng)說明單個(gè)葉子節(jié)點(diǎn)(頁)中的記錄數(shù)=16K/1K=16皆看。(這里假設(shè)一行記錄的數(shù)據(jù)大小為1k仓坞,實(shí)際上現(xiàn)在很多互聯(lián)網(wǎng)業(yè)務(wù)數(shù)據(jù)記錄大小通常就是1K左右)。那么現(xiàn)在我們需要計(jì)算出非葉子節(jié)點(diǎn)能存放多少指針悬蔽,其實(shí)這也很好算扯躺,我們假設(shè)主鍵ID為bigint類型,長度為8字節(jié)蝎困,而指針大小在InnoDB源碼中設(shè)置為6字節(jié)录语,這樣一共14字節(jié),我們一個(gè)頁中能存放多少這樣的單元禾乘,其實(shí)就代表有多少指針澎埠,即16384/14=1170。那么可以算出一棵高度為2的B+樹始藕,能存放117016=18720條這樣的數(shù)據(jù)記錄蒲稳。根據(jù)同樣的原理我們可以算出一個(gè)高度為3的B+樹可以存放:1170117016=21902400條這樣的記錄氮趋。所以在InnoDB中B+樹高度一般為1-3層,它就能滿足千萬級的數(shù)據(jù)存儲(chǔ)江耀。在查找數(shù)據(jù)時(shí)一次頁的查找代表一次IO剩胁,所以通過主鍵索引查詢通常只需要1-3次IO操作即可查找到數(shù)據(jù)。怎么得到InnoDB主鍵索引B+樹的高度祥国?上面我們通過推斷得出B+樹的高度通常是1-3昵观,下面我們從另外一個(gè)側(cè)面證明這個(gè)結(jié)論。在InnoDB的表空間文件中舌稀,約定page number為3的代表主鍵索引的根頁啊犬,而在根頁偏移量為64的地方存放了該B+樹的page level。如果page level為1壁查,樹高為2觉至,page level為2,則樹高為3睡腿。即B+樹的高度=page level+1语御;下面我們將從實(shí)際環(huán)境中嘗試找到這個(gè)page level。在實(shí)際操作之前席怪,你可以通過InnoDB元數(shù)據(jù)表確認(rèn)主鍵索引根頁的page number為3沃暗,你也可以從《InnoDB存儲(chǔ)引擎》這本書中得到確認(rèn)。

<pre class="code-snippet__js" data-lang="sql" style="margin: 0px; padding: 1em 1em 1em 0px; max-width: 1000%; box-sizing: border-box !important; overflow-wrap: break-word !important; overflow-x: auto; white-space: normal; -webkit-box-flex: 1; flex: 1 1 0%;">SELECT b.name, a.name, index_id, type, a.space, a.PAGE_NO ``FROM information_schema.INNODB_SYS_INDEXES a, information_schema.INNODB_SYS_TABLES b WHERE a.table_id = b.table_id `` AND a.space <> 0;</pre>

執(zhí)行結(jié)果:


圖片

img可以看出數(shù)據(jù)庫dbt3下的customer表何恶、lineitem表主鍵索引根頁的page number均為3孽锥,而其他的二級索引page number為4。關(guān)于二級索引與主鍵索引的區(qū)別請參考MySQL相關(guān)書籍细层,本文不在此介紹惜辑。下面我們對數(shù)據(jù)庫表空間文件做想相關(guān)的解析:
圖片

img因?yàn)橹麈I索引B+樹的根頁在整個(gè)表空間文件中的第3個(gè)頁開始,所以可以算出它在文件中的偏移量:163843=49152(16384為頁大幸呤辍)盛撑。另外根據(jù)《InnoDB存儲(chǔ)引擎》中描述在根頁的64偏移量位置前2個(gè)字節(jié),保存了page level的值捧搞,因此我們想要的page level的值在整個(gè)文件中的偏移量為:163843+64=49152+64=49216抵卫,前2個(gè)字節(jié)中。接下來我們用hexdump工具胎撇,查看表空間文件指定偏移量上的數(shù)據(jù):

圖片

img

  • linetem表的page level為2介粘,B+樹高度為page level+1=3;

  • region表的page level為0晚树,B+樹高度為page level+1=1姻采;

  • customer表的page level為2,B+樹高度為page level+1=3爵憎;

這三張表的數(shù)據(jù)量如下:
圖片

img總結(jié)lineitem表的數(shù)據(jù)行數(shù)為600多萬慨亲,B+樹高度為3婚瓜,customer表數(shù)據(jù)行數(shù)只有15萬,B+樹高度也為3刑棵“涂蹋可以看出盡管數(shù)據(jù)量差異較大,這兩個(gè)表樹的高度都是3蛉签,換句話說這兩個(gè)表通過索引查詢效率并沒有太大差異冈涧,因?yàn)槎贾恍枰?次IO。那么如果有一張表行數(shù)是一千萬正蛙,那么他的B+樹高度依舊是3,查詢效率仍然不會(huì)相差太大营曼。region表只有5行數(shù)據(jù)乒验,當(dāng)然他的B+樹高度為1。最后回顧一道面試題:有一道MySQL的面試題蒂阱,為什么MySQL的索引要使用B+樹而不是其它樹形結(jié)構(gòu)?比如B樹锻全?現(xiàn)在這個(gè)問題的復(fù)雜版本可以參考本文;簡單版本回答是:因?yàn)锽樹不管葉子節(jié)點(diǎn)還是非葉子節(jié)點(diǎn)录煤,都會(huì)保存數(shù)據(jù)鳄厌,這樣導(dǎo)致在非葉子節(jié)點(diǎn)中能保存的指針數(shù)量變少(有些資料也稱為扇出),指針少的情況下要保存大量數(shù)據(jù)妈踊,只能增加樹的高度了嚎,導(dǎo)致IO操作變多,查詢性能變低廊营;本文從一個(gè)問題出發(fā)歪泳,逐步介紹了InnoDB索引組織表的原理、查詢方式露筒,并結(jié)合已有知識呐伞,回答該問題,結(jié)合實(shí)踐來證明慎式。當(dāng)然為了表述簡單易懂伶氢,文中忽略了一些細(xì)枝末節(jié),比如一個(gè)頁中不可能所有空間都用于存放數(shù)據(jù)瘪吏,它還會(huì)存放一些少量的其他字段比如page level癣防,index number等等,另外還有頁的填充因子也導(dǎo)致一個(gè)頁不可能全部用于保存數(shù)據(jù)掌眠。關(guān)于二級索引數(shù)據(jù)存取方式可以參考MySQL相關(guān)書籍劣砍,他的要點(diǎn)是結(jié)合主鍵索引進(jìn)行回表查詢。參考資料:

  • 《MySQL技術(shù)內(nèi)幕:InnoDB存儲(chǔ)引擎》

  • http://www.innomysql.com/查看-innodb表中每個(gè)的索引高度/

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末扇救,一起剝皮案震驚了整個(gè)濱河市刑枝,隨后出現(xiàn)的幾起案子香嗓,更是在濱河造成了極大的恐慌,老刑警劉巖装畅,帶你破解...
    沈念sama閱讀 222,000評論 6 515
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件靠娱,死亡現(xiàn)場離奇詭異,居然都是意外死亡掠兄,警方通過查閱死者的電腦和手機(jī)像云,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 94,745評論 3 399
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來蚂夕,“玉大人迅诬,你說我怎么就攤上這事⌒鲭梗” “怎么了侈贷?”我有些...
    開封第一講書人閱讀 168,561評論 0 360
  • 文/不壞的土叔 我叫張陵,是天一觀的道長等脂。 經(jīng)常有香客問我俏蛮,道長,這世上最難降的妖魔是什么上遥? 我笑而不...
    開封第一講書人閱讀 59,782評論 1 298
  • 正文 為了忘掉前任搏屑,我火速辦了婚禮,結(jié)果婚禮上粉楚,老公的妹妹穿的比我還像新娘辣恋。我一直安慰自己,他們只是感情好模软,可當(dāng)我...
    茶點(diǎn)故事閱讀 68,798評論 6 397
  • 文/花漫 我一把揭開白布抑党。 她就那樣靜靜地躺著,像睡著了一般撵摆。 火紅的嫁衣襯著肌膚如雪底靠。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 52,394評論 1 310
  • 那天特铝,我揣著相機(jī)與錄音暑中,去河邊找鬼。 笑死鲫剿,一個(gè)胖子當(dāng)著我的面吹牛鳄逾,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播灵莲,決...
    沈念sama閱讀 40,952評論 3 421
  • 文/蒼蘭香墨 我猛地睜開眼雕凹,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起枚抵,我...
    開封第一講書人閱讀 39,852評論 0 276
  • 序言:老撾萬榮一對情侶失蹤线欲,失蹤者是張志新(化名)和其女友劉穎,沒想到半個(gè)月后汽摹,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體李丰,經(jīng)...
    沈念sama閱讀 46,409評論 1 318
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 38,483評論 3 341
  • 正文 我和宋清朗相戀三年逼泣,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了趴泌。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 40,615評論 1 352
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡拉庶,死狀恐怖嗜憔,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情氏仗,我是刑警寧澤吉捶,帶...
    沈念sama閱讀 36,303評論 5 350
  • 正文 年R本政府宣布,位于F島的核電站廓鞠,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏谣旁。R本人自食惡果不足惜床佳,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,979評論 3 334
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望榄审。 院中可真熱鬧砌们,春花似錦、人聲如沸搁进。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,470評論 0 24
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽饼问。三九已至影兽,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間莱革,已是汗流浹背峻堰。 一陣腳步聲響...
    開封第一講書人閱讀 33,571評論 1 272
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留盅视,地道東北人捐名。 一個(gè)月前我還...
    沈念sama閱讀 49,041評論 3 377
  • 正文 我出身青樓,卻偏偏與公主長得像闹击,于是被迫代替她去往敵國和親镶蹋。 傳聞我的和親對象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 45,630評論 2 359

推薦閱讀更多精彩內(nèi)容