記一次內(nèi)存泄漏排查過(guò)程

新版的dubbo-admin 在支持dubbo2.7新特性的同時(shí)榄审,還兼容dubbo2.6砌们。基于dubbo2.7的元數(shù)據(jù)中心瘟判,我們可以做一些事情怨绣,比如服務(wù)測(cè)試角溃,在目前版本的dubbo-admin中拷获,其實(shí)已經(jīng)支持這個(gè)功能。

結(jié)論

先說(shuō)結(jié)論减细,導(dǎo)致內(nèi)存泄漏的代碼在 org.apache.dubbo.admin.service.RegistryServerSync#notify 中匆瓜,核心代碼就是這一段

if (URL_IDS_MAPPER.containsKey(url.toFullString())) {
    ids.put(URL_IDS_MAPPER.get(url.toFullString()), url);
} else {
    String md5 = CoderUtil.MD5_16bit(url.toFullString());
    ids.put(md5, url);
    URL_IDS_MAPPER.putIfAbsent(url.toFullString(), md5);
}

簡(jiǎn)單來(lái)說(shuō)就是 URL_IDS_MAPPER一直在增長(zhǎng),導(dǎo)致它占用的內(nèi)存越來(lái)越越大,最后導(dǎo)致不停的fullGC

分析

  1. 什么情況下會(huì)執(zhí)行這個(gè)方法驮吱?
    當(dāng)/dubbo下的節(jié)點(diǎn)發(fā)生變更的時(shí)候

  2. URL_IDS_MAPPER的本意只是想維護(hù)一個(gè) md5 與 fullUrl 的關(guān)系茧妒,但因?yàn)榭刂撇划?dāng),導(dǎo)致它的容量不斷增長(zhǎng)左冬,感覺(jué)這個(gè)URL_IDS_MAPPER完全沒(méi)有必要

  3. 控制不當(dāng)指的是什么桐筏?
    比如每次提供者或者消費(fèi)者 上線 -> 下線 -> 上線,雖然該服務(wù)一直都只有一個(gè)實(shí)例拇砰,但卻產(chǎn)生了多個(gè)MD5梅忌,如果頻繁的進(jìn)行這個(gè)操作,就會(huì)導(dǎo)致URL_IDS_MAPPER容量越來(lái)越大

  4. URL_IDS_MAPPER對(duì)應(yīng)的其實(shí)還有一個(gè) 'registryCache'除破,但為什么 'registryCache'沒(méi)有內(nèi)存泄漏問(wèn)題牧氮?
    因?yàn)樵谠摲椒ㄖ杏嗅槍?duì)'registryCache'的清除操作

  5. 怎么發(fā)現(xiàn)的這個(gè)問(wèn)題?
    如果服務(wù)量比較小瑰枫,服務(wù)變更不頻繁踱葛,可能感知不到這個(gè)問(wèn)題。但如果服務(wù)量大又經(jīng)常上下線光坝,這個(gè)問(wèn)題就很明顯了尸诽。會(huì)發(fā)現(xiàn)應(yīng)用占用的內(nèi)存越來(lái)大,到后面服務(wù)器就一直在fullGC了

  6. 怎么排查盯另?
    top -> 看GC -> 內(nèi)存dump -> MAT分析 -> 查看大對(duì)象 -> 發(fā)現(xiàn)URL_IDS_MAPPER中元素有100萬(wàn)+ ->再分析代碼

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末逊谋,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子土铺,更是在濱河造成了極大的恐慌胶滋,老刑警劉巖,帶你破解...
    沈念sama閱讀 207,113評(píng)論 6 481
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件悲敷,死亡現(xiàn)場(chǎng)離奇詭異究恤,居然都是意外死亡,警方通過(guò)查閱死者的電腦和手機(jī)后德,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,644評(píng)論 2 381
  • 文/潘曉璐 我一進(jìn)店門(mén)部宿,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái),“玉大人瓢湃,你說(shuō)我怎么就攤上這事理张。” “怎么了绵患?”我有些...
    開(kāi)封第一講書(shū)人閱讀 153,340評(píng)論 0 344
  • 文/不壞的土叔 我叫張陵雾叭,是天一觀的道長(zhǎng)。 經(jīng)常有香客問(wèn)我落蝙,道長(zhǎng)织狐,這世上最難降的妖魔是什么暂幼? 我笑而不...
    開(kāi)封第一講書(shū)人閱讀 55,449評(píng)論 1 279
  • 正文 為了忘掉前任,我火速辦了婚禮移迫,結(jié)果婚禮上旺嬉,老公的妹妹穿的比我還像新娘。我一直安慰自己厨埋,他們只是感情好邪媳,可當(dāng)我...
    茶點(diǎn)故事閱讀 64,445評(píng)論 5 374
  • 文/花漫 我一把揭開(kāi)白布。 她就那樣靜靜地躺著荡陷,像睡著了一般悲酷。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上亲善,一...
    開(kāi)封第一講書(shū)人閱讀 49,166評(píng)論 1 284
  • 那天设易,我揣著相機(jī)與錄音,去河邊找鬼蛹头。 笑死顿肺,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的渣蜗。 我是一名探鬼主播屠尊,決...
    沈念sama閱讀 38,442評(píng)論 3 401
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼耕拷!你這毒婦竟也來(lái)了讼昆?” 一聲冷哼從身側(cè)響起,我...
    開(kāi)封第一講書(shū)人閱讀 37,105評(píng)論 0 261
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤骚烧,失蹤者是張志新(化名)和其女友劉穎浸赫,沒(méi)想到半個(gè)月后,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體赃绊,經(jīng)...
    沈念sama閱讀 43,601評(píng)論 1 300
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡既峡,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 36,066評(píng)論 2 325
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了碧查。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片运敢。...
    茶點(diǎn)故事閱讀 38,161評(píng)論 1 334
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖忠售,靈堂內(nèi)的尸體忽然破棺而出传惠,到底是詐尸還是另有隱情,我是刑警寧澤稻扬,帶...
    沈念sama閱讀 33,792評(píng)論 4 323
  • 正文 年R本政府宣布卦方,位于F島的核電站,受9級(jí)特大地震影響腐螟,放射性物質(zhì)發(fā)生泄漏愿汰。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 39,351評(píng)論 3 307
  • 文/蒙蒙 一乐纸、第九天 我趴在偏房一處隱蔽的房頂上張望衬廷。 院中可真熱鬧,春花似錦汽绢、人聲如沸吗跋。這莊子的主人今日做“春日...
    開(kāi)封第一講書(shū)人閱讀 30,352評(píng)論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)跌宛。三九已至,卻和暖如春积仗,著一層夾襖步出監(jiān)牢的瞬間疆拘,已是汗流浹背。 一陣腳步聲響...
    開(kāi)封第一講書(shū)人閱讀 31,584評(píng)論 1 261
  • 我被黑心中介騙來(lái)泰國(guó)打工寂曹, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留哎迄,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 45,618評(píng)論 2 355
  • 正文 我出身青樓隆圆,卻偏偏與公主長(zhǎng)得像漱挚,于是被迫代替她去往敵國(guó)和親。 傳聞我的和親對(duì)象是個(gè)殘疾皇子渺氧,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 42,916評(píng)論 2 344

推薦閱讀更多精彩內(nèi)容