Linux oom-killer

本人從事UTM的開發(fā)工作框产,最近遇到out of memory killer.這里整理一下資料秉宿。

簡述

當系統(tǒng)內(nèi)存不足時膊存,系統(tǒng)會觸發(fā) oom-killer隔崎。
oom-killer的機制就是選擇殺掉最適合的進程,釋放內(nèi)存钓株,增加系統(tǒng)的可用內(nèi)存。

什么時候觸發(fā)oom-killer受葛?

觸發(fā)oom-killer不是在malloc分配內(nèi)存時纲堵;而是在真正使用分配的內(nèi)存時鸯隅,虛擬內(nèi)存映射到物理地址時炕舵。
malloc的manual中有說明

By default, Linux follows an optimistic memory allocation
strategy. This means that when malloc() returns non-NULL
there is no guarantee that the memory really is available.
This is a really bad bug. In case it turns out that the sys‐
tem is out of memory, one or more processes will be killed by
the infamous OOM killer. In case Linux is employed under cir‐
cumstances where it would be less desirable to suddenly lose
some randomly picked processes, and moreover the kernel ver‐
sion is sufficiently recent, one can switch off this overcom‐
mitting behavior using a command like:
# echo 2 > /proc/sys/vm/overcommit_memory

overcommit是Linux的一種內(nèi)存使用機制。通過/proc/sys/vm/overcommit_memory配置,有三種取值:

Overcommit_memory Description Comment
0 啟發(fā)式策略 拒絕明顯過大的內(nèi)存分配睹耐。用于典型系統(tǒng)。root比普通用戶可分配更多的內(nèi)存。
1 允許overcommit 這種策略適合那些不能承受內(nèi)存分配失敗的應用纵刘,例如科學計算。
2 禁止overcommit 總內(nèi)存使用空間不能超過swap+RAM*系數(shù).當malloc時位谋,內(nèi)存不足會返回error。系數(shù)可以通過/proc/sys/vm/overcommit_ratio配置赊淑,默認50。

只要有overcomit機制掺出,內(nèi)存不足時百框,必定會觸發(fā)oom-killer柬泽。

為什么使用oom-killer锨并?

大多數(shù)主流發(fā)行版的內(nèi)核都將/proc/sys/vm/overcommit_memory設置為0闸拿,意味著進程可以申請的內(nèi)存比實際可用的更多揽趾。這是基于分配的內(nèi)存并不一定立即使用的啟發(fā)式策略和可能進程在它整個運行過程中沒完全使用它分配的所有內(nèi)存。
假如禁止overcommit俐筋,系統(tǒng)無法完全使用所有的內(nèi)存,因此會浪費一部分赠幕。
overcommit允許系統(tǒng)以更有效的方式使用內(nèi)存榕堰,但是有OOM的風險康二。
占用內(nèi)存比較貪婪的進程可能會耗盡系統(tǒng)的內(nèi)存挨约,讓系統(tǒng)停頓。
這就導致了一種情形馆衔,當內(nèi)存很低時减细,甚至一個頁也不夠分配時,允許管理員殺掉合適的進程,讓內(nèi)核可以采取一些重要的操作例如釋放內(nèi)存纸型。在這種情形下,oom-killer挑選并殺掉合適的進程為了系統(tǒng)其余的任務考慮皂岔。

oom-killer的處理機制

怎么選擇最適合的進程圾笨?

通過一個評分機制(badness score)選擇最適合的進程土铺。badness score 通過/proc/<pid>/oom_score體現(xiàn)。
基于的原則就是用最小的損失換最大的內(nèi)存。
badness score與該進程占用的內(nèi)存瓢湃,它的cpu時間绵患,運行時間作煌,它的/proc/<pid>/oom_adj粟誓,運行級別nice有關(guān)病瞳。
占用內(nèi)存越多亲善,運行時間越短,badness score越高旷祸。
相反骚烧,占用內(nèi)存越少辫诅,運行時間越長者冤,badness score越低。
假如badness進程是父進程衬廷,它和它的子進程都會被kill掉。
具體的實現(xiàn)參考內(nèi)核oom_kill.c中 badness()函數(shù)酗宋。

參考鏈接:
Taming the OOM killer
When Linux Runs Out of Memory
How the Linux OOM killer works

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末蜕猫,一起剝皮案震驚了整個濱河市楣黍,隨后出現(xiàn)的幾起案子哩治,更是在濱河造成了極大的恐慌台谢,老刑警劉巖菜枷,帶你破解...
    沈念sama閱讀 211,194評論 6 490
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件叁丧,死亡現(xiàn)場離奇詭異啤誊,居然都是意外死亡岳瞭,警方通過查閱死者的電腦和手機,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 90,058評論 2 385
  • 文/潘曉璐 我一進店門蚊锹,熙熙樓的掌柜王于貴愁眉苦臉地迎上來瞳筏,“玉大人,你說我怎么就攤上這事牡昆∫唬” “怎么了?”我有些...
    開封第一講書人閱讀 156,780評論 0 346
  • 文/不壞的土叔 我叫張陵丢烘,是天一觀的道長柱宦。 經(jīng)常有香客問我,道長播瞳,這世上最難降的妖魔是什么掸刊? 我笑而不...
    開封第一講書人閱讀 56,388評論 1 283
  • 正文 為了忘掉前任,我火速辦了婚禮赢乓,結(jié)果婚禮上忧侧,老公的妹妹穿的比我還像新娘。我一直安慰自己牌芋,他們只是感情好蚓炬,可當我...
    茶點故事閱讀 65,430評論 5 384
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著躺屁,像睡著了一般肯夏。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上楼咳,一...
    開封第一講書人閱讀 49,764評論 1 290
  • 那天熄捍,我揣著相機與錄音,去河邊找鬼母怜。 笑死,一個胖子當著我的面吹牛缚柏,可吹牛的內(nèi)容都是我干的苹熏。 我是一名探鬼主播,決...
    沈念sama閱讀 38,907評論 3 406
  • 文/蒼蘭香墨 我猛地睜開眼币喧,長吁一口氣:“原來是場噩夢啊……” “哼轨域!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起杀餐,我...
    開封第一講書人閱讀 37,679評論 0 266
  • 序言:老撾萬榮一對情侶失蹤干发,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后史翘,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體枉长,經(jīng)...
    沈念sama閱讀 44,122評論 1 303
  • 正文 獨居荒郊野嶺守林人離奇死亡冀续,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 36,459評論 2 325
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了必峰。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片洪唐。...
    茶點故事閱讀 38,605評論 1 340
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖吼蚁,靈堂內(nèi)的尸體忽然破棺而出凭需,到底是詐尸還是另有隱情,我是刑警寧澤肝匆,帶...
    沈念sama閱讀 34,270評論 4 329
  • 正文 年R本政府宣布粒蜈,位于F島的核電站,受9級特大地震影響旗国,放射性物質(zhì)發(fā)生泄漏薪伏。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點故事閱讀 39,867評論 3 312
  • 文/蒙蒙 一粗仓、第九天 我趴在偏房一處隱蔽的房頂上張望嫁怀。 院中可真熱鬧,春花似錦借浊、人聲如沸塘淑。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,734評論 0 21
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽存捺。三九已至,卻和暖如春曙蒸,著一層夾襖步出監(jiān)牢的瞬間捌治,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 31,961評論 1 265
  • 我被黑心中介騙來泰國打工纽窟, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留肖油,地道東北人。 一個月前我還...
    沈念sama閱讀 46,297評論 2 360
  • 正文 我出身青樓臂港,卻偏偏與公主長得像森枪,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子审孽,可洞房花燭夜當晚...
    茶點故事閱讀 43,472評論 2 348

推薦閱讀更多精彩內(nèi)容