netty內(nèi)存分配總覽

netty的內(nèi)存分配總體上思路是參考jemalloc
jemalloc介紹:
http://jemalloc.net/
https://people.freebsd.org/~jasone/jemalloc/bsdcan2006/jemalloc.pdf
中文版:
https://blog.csdn.net/stillingpb/article/details/50937366
如果對jemalloc源碼感興趣娘汞、可以參考如下系列文章
http://www.reibang.com/p/f1988cc08dfd

這里貼出一張jemalloc內(nèi)存劃分視圖


image.png

如上圖所示jemalloc對內(nèi)存的劃分遵循由大到小挡育、逐層分配:

  1. 內(nèi)存是由一定數(shù)量的arean進行管理的.
    對應(yīng)于netty中就是PoolArena咙俩,netty在實例化內(nèi)存分配器ByteBufAlloctor的時候初始化PoolArean的數(shù)量為 2倍的cpu核數(shù)
    netty為什么將內(nèi)存根據(jù)arean劃分為不同的塊?
    參考 https://blog.csdn.net/stillingpb/article/details/50937366
  2. 一個arena被分割成若干chunks,作為向操作系統(tǒng)請求的內(nèi)存的基本單元妖谴。
    在netty中多個chunk之間根據(jù)不同的使用率分類并且之間通過雙向鏈表進行關(guān)聯(lián)簿煌。
  3. chunk內(nèi)部又包含著若干runs, 作為分配小塊內(nèi)存的基本單元.
    在netty中chunk的默認(rèn)大小為16M、通過一個完全二叉樹進行管理褒侧、這個完全二叉樹的葉子節(jié)點的大小就是一個page的大小良风、默認(rèn)為8k,多個page組成一個run闷供、當(dāng)請求內(nèi)存大小大于page烟央、netty中分配一個run的大小、也就是多個page塊歪脏。
  4. run由pages組成, 最終被劃分成一定數(shù)量的regions.
    在netty中如請求的內(nèi)存大于一個page(8k)疑俭,那么poolChunk會分配多個page給應(yīng)用程序也就是一個Run,同時一個page也可繼續(xù)被分割為若干個子regions、作為netty內(nèi)存分配的最小單元婿失,在netty中也即是一個PoolSubpage钞艇。

netty內(nèi)存分配流程

首先舉一個生活中例子。假如我下了一個單豪硅,訂購一塊 N 字節(jié)的內(nèi)存香璃,并等待它的到達(dá)。怎樣做到即時送達(dá)舟误?

  • 如果訂購的內(nèi)存是個小件(好比一塊橡皮葡秒、一本書或是一個微波爐等),那么直接從同城倉庫送出嵌溢。
  • 如果訂購的內(nèi)存是個大件(好比電視機眯牧、空調(diào)等),那么得從區(qū)域倉庫(例如華東區(qū)倉庫)送出赖草。
  • 如果訂購的內(nèi)存是個巨大件(好比汽車学少、輪船),那么得從全國倉庫送出秧骑。
  • 在 netty 類比以上的物流系統(tǒng)中
    同城倉庫相當(dāng)于 PoolThreadCache —— 線程獨有的內(nèi)存?zhèn)}庫版确;
    區(qū)域倉庫相當(dāng)于 PoolArean —— 幾個線程共享的內(nèi)存?zhèn)}庫;
    全國倉庫相當(dāng)于全局變量指向的內(nèi)存?zhèn)}庫乎折,為所有線程可用绒疗。
    在 netty 中,整塊批發(fā)內(nèi)存骂澄,之后或拆開零售吓蘑,或整塊出售。整塊批發(fā)的內(nèi)存叫做 chunk,對于小件和大件訂單磨镶,則進一步拆成 run溃蔫。
    Chunk 的大小為 16MB(可調(diào))或其倍數(shù),如果是堆外內(nèi)存琳猫、那么根據(jù)16M對齊伟叛;而 run 大小為頁大小(8k)的整數(shù)倍。
    netty中整個內(nèi)存分配可以用以下圖來展示:


    image.png
最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末脐嫂,一起剝皮案震驚了整個濱河市痪伦,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌雹锣,老刑警劉巖网沾,帶你破解...
    沈念sama閱讀 207,113評論 6 481
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異蕊爵,居然都是意外死亡辉哥,警方通過查閱死者的電腦和手機,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,644評論 2 381
  • 文/潘曉璐 我一進店門攒射,熙熙樓的掌柜王于貴愁眉苦臉地迎上來醋旦,“玉大人,你說我怎么就攤上這事会放∷瞧耄” “怎么了?”我有些...
    開封第一講書人閱讀 153,340評論 0 344
  • 文/不壞的土叔 我叫張陵咧最,是天一觀的道長捂人。 經(jīng)常有香客問我,道長矢沿,這世上最難降的妖魔是什么滥搭? 我笑而不...
    開封第一講書人閱讀 55,449評論 1 279
  • 正文 為了忘掉前任,我火速辦了婚禮捣鲸,結(jié)果婚禮上瑟匆,老公的妹妹穿的比我還像新娘。我一直安慰自己栽惶,他們只是感情好愁溜,可當(dāng)我...
    茶點故事閱讀 64,445評論 5 374
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著外厂,像睡著了一般冕象。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上酣衷,一...
    開封第一講書人閱讀 49,166評論 1 284
  • 那天交惯,我揣著相機與錄音次泽,去河邊找鬼穿仪。 笑死席爽,一個胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的啊片。 我是一名探鬼主播只锻,決...
    沈念sama閱讀 38,442評論 3 401
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼紫谷!你這毒婦竟也來了齐饮?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 37,105評論 0 261
  • 序言:老撾萬榮一對情侶失蹤笤昨,失蹤者是張志新(化名)和其女友劉穎祖驱,沒想到半個月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體瞒窒,經(jīng)...
    沈念sama閱讀 43,601評論 1 300
  • 正文 獨居荒郊野嶺守林人離奇死亡捺僻,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 36,066評論 2 325
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了崇裁。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片匕坯。...
    茶點故事閱讀 38,161評論 1 334
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖拔稳,靈堂內(nèi)的尸體忽然破棺而出葛峻,到底是詐尸還是另有隱情,我是刑警寧澤巴比,帶...
    沈念sama閱讀 33,792評論 4 323
  • 正文 年R本政府宣布术奖,位于F島的核電站,受9級特大地震影響轻绞,放射性物質(zhì)發(fā)生泄漏腰耙。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點故事閱讀 39,351評論 3 307
  • 文/蒙蒙 一铲球、第九天 我趴在偏房一處隱蔽的房頂上張望挺庞。 院中可真熱鬧,春花似錦稼病、人聲如沸选侨。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,352評論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽援制。三九已至,卻和暖如春芍瑞,著一層夾襖步出監(jiān)牢的瞬間晨仑,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 31,584評論 1 261
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留洪己,地道東北人妥凳。 一個月前我還...
    沈念sama閱讀 45,618評論 2 355
  • 正文 我出身青樓,卻偏偏與公主長得像答捕,于是被迫代替她去往敵國和親逝钥。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 42,916評論 2 344

推薦閱讀更多精彩內(nèi)容