JVM性能調(diào)優(yōu)案例01:Unloading時(shí)間太長(zhǎng) - 知乎

近期在項(xiàng)目上遇到了多個(gè)系統(tǒng)性能問題播掷,都涉及到JVM調(diào)優(yōu),這里做個(gè)記錄揍异。

A項(xiàng)目:GC class unloading時(shí)間很長(zhǎng)

問題現(xiàn)象

非功能測(cè)試環(huán)境出現(xiàn)了壓測(cè)的機(jī)器GC日志里有:

[GC remark 2021-11-19T14:36:18.810......[Unloading, 8.2604164 secs]......]// 最長(zhǎng)的出現(xiàn)了33s多

網(wǎng)上查到跟這個(gè)很類似:記一次CMS unloading class 耗時(shí)長(zhǎng)調(diào)查

更詳細(xì)的原理可以參考:https://www.cnblogs.com/alchemystar/p/14861423.html

原因分析

查看了一下牍戚,系統(tǒng)內(nèi)存8G汽馋,起了幾個(gè)Java進(jìn)程不同,其中一個(gè)占了6G多拐云,程序運(yùn)行時(shí)系統(tǒng)內(nèi)存占用超過80%,此時(shí)用free或top可以查看到20G的swap使用量一般超過2G师抄,最多到5.5G,發(fā)生了大量的swap交換教硫,把一些不活躍的內(nèi)存塊交換到了磁盤叨吮。從而在下次GC掃描時(shí)又從磁盤交換回了內(nèi)存,導(dǎo)致了很長(zhǎng)時(shí)間的延遲瞬矩。(也可以用swapon -s查看具體在哪個(gè)盤上茶鉴。)

解決辦法

知道了原理,就很好解決:

1)如果內(nèi)存充足的情況下丧鸯,可以使用swapoff關(guān)閉掉swap蛤铜,需要有權(quán)限,且與運(yùn)維團(tuán)隊(duì)達(dá)成一致丛肢。

2)盡量不使用swap围肥,具體來說就是降低系統(tǒng)參數(shù)swappiness的值(默認(rèn)0-100)。此數(shù)值在Linux上默認(rèn)為60蜂怎,CentOS上默認(rèn)為30穆刻。可以降低到10或者1杠步,甚至是0氢伟,需要注意的是哪怕是0,也不會(huì)完全關(guān)閉掉swap幽歼,只會(huì)在內(nèi)存低水位時(shí)不使用swap朵锣,如果內(nèi)存到高水位(cat /proc/zoneinfo)比如到95%以上,還是會(huì)使用swap交換內(nèi)存到磁盤甸私。需要權(quán)限诚些,且與運(yùn)維達(dá)成一致。

$ cat /proc/sys/vm/swappiness30## 臨時(shí)性修改:$ sudo sysctl vm.swappiness=10## 永久性修改:## 在/etc/sysctl.conf 文件里添加如下參數(shù):vm.swappiness=10

Linux系統(tǒng)swap的介紹參考:swappiness參數(shù)的含義和設(shè)置 | 云上小悟

Swap的深度原理和控制行為參考:Linux SWAP 深度解讀 - 生活費(fèi) - 博客園

3)在無法和運(yùn)維團(tuán)隊(duì)達(dá)成一致的情況下皇型,可以控制內(nèi)存水位诬烹,就上面的case來說,直接控制xmx6g降低到xmx3g或者4g弃鸦,運(yùn)行一段時(shí)間绞吁,并未出現(xiàn)過長(zhǎng)時(shí)間的Unloading GC情況。

本文使用 文章同步助手 同步

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末唬格,一起剝皮案震驚了整個(gè)濱河市家破,隨后出現(xiàn)的幾起案子颜说,更是在濱河造成了極大的恐慌,老刑警劉巖员舵,帶你破解...
    沈念sama閱讀 218,858評(píng)論 6 508
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件脑沿,死亡現(xiàn)場(chǎng)離奇詭異,居然都是意外死亡马僻,警方通過查閱死者的電腦和手機(jī)庄拇,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,372評(píng)論 3 395
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來韭邓,“玉大人措近,你說我怎么就攤上這事∨纾” “怎么了瞭郑?”我有些...
    開封第一講書人閱讀 165,282評(píng)論 0 356
  • 文/不壞的土叔 我叫張陵,是天一觀的道長(zhǎng)鸭你。 經(jīng)常有香客問我屈张,道長(zhǎng),這世上最難降的妖魔是什么袱巨? 我笑而不...
    開封第一講書人閱讀 58,842評(píng)論 1 295
  • 正文 為了忘掉前任阁谆,我火速辦了婚禮,結(jié)果婚禮上愉老,老公的妹妹穿的比我還像新娘场绿。我一直安慰自己,他們只是感情好嫉入,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,857評(píng)論 6 392
  • 文/花漫 我一把揭開白布焰盗。 她就那樣靜靜地躺著,像睡著了一般咒林。 火紅的嫁衣襯著肌膚如雪熬拒。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 51,679評(píng)論 1 305
  • 那天垫竞,我揣著相機(jī)與錄音澎粟,去河邊找鬼。 笑死件甥,一個(gè)胖子當(dāng)著我的面吹牛捌议,可吹牛的內(nèi)容都是我干的哼拔。 我是一名探鬼主播引有,決...
    沈念sama閱讀 40,406評(píng)論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼,長(zhǎng)吁一口氣:“原來是場(chǎng)噩夢(mèng)啊……” “哼倦逐!你這毒婦竟也來了譬正?” 一聲冷哼從身側(cè)響起宫补,我...
    開封第一講書人閱讀 39,311評(píng)論 0 276
  • 序言:老撾萬榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎曾我,沒想到半個(gè)月后粉怕,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 45,767評(píng)論 1 315
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡抒巢,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,945評(píng)論 3 336
  • 正文 我和宋清朗相戀三年贫贝,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片蛉谜。...
    茶點(diǎn)故事閱讀 40,090評(píng)論 1 350
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖型诚,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情狰贯,我是刑警寧澤,帶...
    沈念sama閱讀 35,785評(píng)論 5 346
  • 正文 年R本政府宣布涵紊,位于F島的核電站傍妒,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏栖袋。R本人自食惡果不足惜拍顷,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,420評(píng)論 3 331
  • 文/蒙蒙 一塘幅、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧电媳,春花似錦踏揣、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,988評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至拼缝,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間咧七,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 33,101評(píng)論 1 271
  • 我被黑心中介騙來泰國打工继阻, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留废酷,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 48,298評(píng)論 3 372
  • 正文 我出身青樓澈蟆,卻偏偏與公主長(zhǎng)得像卓研,于是被迫代替她去往敵國和親趴俘。 傳聞我的和親對(duì)象是個(gè)殘疾皇子奏赘,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 45,033評(píng)論 2 355

推薦閱讀更多精彩內(nèi)容