案例分析:數(shù)據(jù)計算系統(tǒng)頻發(fā)fullgc

一驾中、背景

數(shù)據(jù)計算系統(tǒng)唉堪,日處理數(shù)據(jù)量在上億的規(guī)模; 簡單來說就是不停的從各種存儲中讀取大量數(shù)據(jù)在內(nèi)存中進(jìn)行計算處理肩民,大致每分鐘執(zhí)行500次數(shù)據(jù)提取和計算任務(wù)

總共5臺機(jī)器唠亚,那么每臺機(jī)器每分鐘大概負(fù)責(zé)100次數(shù)據(jù)提取和計算,每次提取 1萬條數(shù)據(jù)持痰,平均計算耗時10秒

二灶搜、GC過程分析

機(jī)器配置4C8G, 堆3G共啃、年輕代1.5G占调、老年代1.5G


image

數(shù)據(jù)分析的每條數(shù)據(jù)比較大,20個字段移剪,平均大小在1kb究珊,那么每次計算的1萬條數(shù)據(jù)為 10MB 大小

新生代多快會塞滿?

執(zhí)行一次產(chǎn)生10m 對象纵苛,一分鐘執(zhí)行100次剿涮, 10m * 100 大概1G,加上其他系統(tǒng)對象 eden區(qū)就被塞滿

觸發(fā)minor gc后有多少對象晉升老年代

一分鐘后攻人,進(jìn)行一次 minor gc取试,假設(shè)有80個計算任務(wù)執(zhí)行完畢了,還有20個任務(wù)還沒執(zhí)行完畢 此時存活對象有 200M怀吻,survivor 放不下瞬浓,只能進(jìn)入老年代

老年代多久會塞滿,進(jìn)行full gc蓬坡?

每次 minor gc 有200m的對象進(jìn)入老年代猿棉,當(dāng)進(jìn)行第七次minor gc 后磅叛, 老年代就只剩100m了,然后當(dāng)發(fā)生第8次 minor gc 的時候由于空間擔(dān)保 老年代不足以存放歷次 minor gc晉升的對象大小萨赁,就要先進(jìn)行 full gc弊琴; 也就是平均 8分鐘進(jìn)行一次 full gc,頻率非常高

三杖爽、如何優(yōu)化敲董?

按照現(xiàn)有的 內(nèi)存分配,最大的問題是 每次minor gc 的時候 survivor 區(qū)都不夠存放存活對象慰安,導(dǎo)致全部晉升到老年代腋寨;
調(diào)整內(nèi)存比例 3G的堆內(nèi)存,2G年輕代(Eden 1.6G化焕、 Survivor 200MB * 2) + 1G老年代


image

這樣每次 minor gc 基本就很少進(jìn)入老年代 大大降低了 full gc 的頻率

但是還要注意 “動態(tài)年齡判斷”精置,回收后 survivor區(qū)域 同齡對象超過其一半,就要直接進(jìn)入老年代 還可以通過 -XX:survivorRatio=8 進(jìn)行調(diào)整锣杂,降低eden區(qū)的比例

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市番宁,隨后出現(xiàn)的幾起案子元莫,更是在濱河造成了極大的恐慌,老刑警劉巖蝶押,帶你破解...
    沈念sama閱讀 218,204評論 6 506
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件踱蠢,死亡現(xiàn)場離奇詭異,居然都是意外死亡棋电,警方通過查閱死者的電腦和手機(jī)茎截,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,091評論 3 395
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來赶盔,“玉大人企锌,你說我怎么就攤上這事∮谖矗” “怎么了撕攒?”我有些...
    開封第一講書人閱讀 164,548評論 0 354
  • 文/不壞的土叔 我叫張陵,是天一觀的道長烘浦。 經(jīng)常有香客問我抖坪,道長,這世上最難降的妖魔是什么闷叉? 我笑而不...
    開封第一講書人閱讀 58,657評論 1 293
  • 正文 為了忘掉前任擦俐,我火速辦了婚禮,結(jié)果婚禮上握侧,老公的妹妹穿的比我還像新娘蚯瞧。我一直安慰自己嘿期,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,689評論 6 392
  • 文/花漫 我一把揭開白布状知。 她就那樣靜靜地躺著秽五,像睡著了一般。 火紅的嫁衣襯著肌膚如雪饥悴。 梳的紋絲不亂的頭發(fā)上坦喘,一...
    開封第一講書人閱讀 51,554評論 1 305
  • 那天,我揣著相機(jī)與錄音西设,去河邊找鬼瓣铣。 笑死,一個胖子當(dāng)著我的面吹牛贷揽,可吹牛的內(nèi)容都是我干的棠笑。 我是一名探鬼主播,決...
    沈念sama閱讀 40,302評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼禽绪,長吁一口氣:“原來是場噩夢啊……” “哼蓖救!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起印屁,我...
    開封第一講書人閱讀 39,216評論 0 276
  • 序言:老撾萬榮一對情侶失蹤循捺,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后雄人,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體从橘,經(jīng)...
    沈念sama閱讀 45,661評論 1 314
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,851評論 3 336
  • 正文 我和宋清朗相戀三年础钠,在試婚紗的時候發(fā)現(xiàn)自己被綠了恰力。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 39,977評論 1 348
  • 序言:一個原本活蹦亂跳的男人離奇死亡旗吁,死狀恐怖踩萎,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情很钓,我是刑警寧澤驻民,帶...
    沈念sama閱讀 35,697評論 5 347
  • 正文 年R本政府宣布,位于F島的核電站履怯,受9級特大地震影響回还,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜叹洲,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,306評論 3 330
  • 文/蒙蒙 一柠硕、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦蝗柔、人聲如沸闻葵。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,898評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽槽畔。三九已至,卻和暖如春胁编,著一層夾襖步出監(jiān)牢的瞬間厢钧,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 33,019評論 1 270
  • 我被黑心中介騙來泰國打工嬉橙, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留早直,地道東北人。 一個月前我還...
    沈念sama閱讀 48,138評論 3 370
  • 正文 我出身青樓市框,卻偏偏與公主長得像霞扬,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子枫振,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,927評論 2 355

推薦閱讀更多精彩內(nèi)容