netty 解碼小坑

1. in.readBytes 導(dǎo)致堆外內(nèi)存泄漏

使用netty 中偶現(xiàn) LEAK: ByteBuf.release() was not called before it's garbage-collected. 在幾次檢查自己的代碼胜嗓,發(fā)現(xiàn)ByteBuf都有釋放。就是找不到問(wèn)題冈止,翻閱了一下netty的官方文檔殿如,有兩種方式可以 打印出泄漏的詳細(xì)信息

  1. ResourceLeakDetector.setLevel(ResourceLeakDetector.Level.ADVANCED);
  2. -Dio.netty.leakDetectionLevel=advanced
    打印日志如下:
    io.netty.buffer.AdvancedLeakAwareByteBuf.writeBytes(AdvancedLeakAwareByteBuf.java:600)
    io.netty.buffer.AbstractByteBuf.readBytes(AbstractByteBuf.java:829)
    com.XXX.XXX.XXX.network.codec.XXXTcpDecoder.decode(XXXTcpDecoder.java:55)
    io.netty.handler.codec.ByteToMessageDecoder.decodeRemovalReentryProtection(ByteToMessageDecoder.java:489)
    io.netty.handler.codec.ByteToMessageDecoder.callDecode(ByteToMessageDecoder.java:428)
    io.netty.handler.codec.ByteToMessageDecoder.channelRead(ByteToMessageDecoder.java:265)
    io.netty.channel.AbstractChannelHandlerContext.invokeChannelRead(AbstractChannelHandlerContext.java:362)
    io.netty.channel.AbstractChannelHandlerContext.invokeChannelRead(AbstractChannelHandlerContext.java:348)
    io.netty.channel.AbstractChannelHandlerContext.fireChannelRead(AbstractChannelHandlerContext.java:340)
    io.netty.channel.DefaultChannelPipeline$HeadContext.channelRead(DefaultChannelPipeline.java:1334)
    io.netty.channel.AbstractChannelHandlerContext.invokeChannelRead(AbstractChannelHandlerContext.java:362)
    io.netty.channel.AbstractChannelHandlerContext.invokeChannelRead(AbstractChannelHandlerContext.java:348)
    io.netty.channel.DefaultChannelPipeline.fireChannelRead(DefaultChannelPipeline.java:926)
    io.netty.channel.nio.AbstractNioByteChannel$NioByteUnsafe.read(AbstractNioByteChannel.java:134)
    io.netty.channel.nio.NioEventLoop.processSelectedKey(NioEventLoop.java:644)
    io.netty.channel.nio.NioEventLoop.processSelectedKeysOptimized(NioEventLoop.java:579)
    io.netty.channel.nio.NioEventLoop.processSelectedKeys(NioEventLoop.java:496)
    io.netty.channel.nio.NioEventLoop.run(NioEventLoop.java:458)
    io.netty.util.concurrent.SingleThreadEventExecutor$5.run(SingleThreadEventExecutor.java:858)
    io.netty.util.concurrent.DefaultThreadFactory$DefaultRunnableDecorator.run(DefaultThreadFactory.java:138)
    java.lang.Thread.run(Thread.java:748)
Created at:
    io.netty.util.ResourceLeakDetector.track(ResourceLeakDetector.java:237)
    io.netty.buffer.PooledByteBufAllocator.newDirectBuffer(PooledByteBufAllocator.java:331)
    io.netty.buffer.AbstractByteBufAllocator.directBuffer(AbstractByteBufAllocator.java:181)
    io.netty.buffer.AbstractByteBufAllocator.buffer(AbstractByteBufAllocator.java:117)
    io.netty.buffer.AbstractByteBuf.readBytes(AbstractByteBuf.java:828)
    com.XXX.XXX.XXX.network.codec.XXXTcpDecoder.decode(XXXTcpDecoder.java:55)
    io.netty.handler.codec.ByteToMessageDecoder.decodeRemovalReentryProtection(ByteToMessageDecoder.java:489)
    io.netty.handler.codec.ByteToMessageDecoder.callDecode(ByteToMessageDecoder.java:428)
    io.netty.handler.codec.ByteToMessageDecoder.channelRead(ByteToMessageDecoder.java:265)
    io.netty.channel.AbstractChannelHandlerContext.invokeChannelRead(AbstractChannelHandlerContext.java:362)
    io.netty.channel.AbstractChannelHandlerContext.invokeChannelRead(AbstractChannelHandlerContext.java:348)
    io.netty.channel.AbstractChannelHandlerContext.fireChannelRead(AbstractChannelHandlerContext.java:340)
    io.netty.channel.DefaultChannelPipeline$HeadContext.channelRead(DefaultChannelPipeline.java:1334)
    io.netty.channel.AbstractChannelHandlerContext.invokeChannelRead(AbstractChannelHandlerContext.java:362)
    io.netty.channel.AbstractChannelHandlerContext.invokeChannelRead(AbstractChannelHandlerContext.java:348)
    io.netty.channel.DefaultChannelPipeline.fireChannelRead(DefaultChannelPipeline.java:926)
    io.netty.channel.nio.AbstractNioByteChannel$NioByteUnsafe.read(AbstractNioByteChannel.java:134)
    io.netty.channel.nio.NioEventLoop.processSelectedKey(NioEventLoop.java:644)
    io.netty.channel.nio.NioEventLoop.processSelectedKeysOptimized(NioEventLoop.java:579)
    io.netty.channel.nio.NioEventLoop.processSelectedKeys(NioEventLoop.java:496)
    io.netty.channel.nio.NioEventLoop.run(NioEventLoop.java:458)
    io.netty.util.concurrent.SingleThreadEventExecutor$5.run(SingleThreadEventExecutor.java:858)
    io.netty.util.concurrent.DefaultThreadFactory$DefaultRunnableDecorator.run(DefaultThreadFactory.java:138)
    java.lang.Thread.run(Thread.java:748)

com.XXX.XXX.XXX.network.codec.XXXTcpDecoder.decode(XXXTcpDecoder.java:55
來(lái)看一下這一行明確提示泄漏的地方,然后看了一下對(duì)應(yīng)的代碼一臉懵逼


image.png

in.readBytes 需要釋放bytebuf ??尊剔?? 這他媽什么操作 嚇得我趕緊看了一下源代碼菱皆。须误。 注意 我特么也很sb 仔細(xì)看入?yún)?一個(gè)是 long 一個(gè)是 byte[] 導(dǎo)致我浪費(fèi)了很多時(shí)間

  @Override
    public ByteBuf readBytes(byte[] dst) {
        readBytes(dst, 0, dst.length);
        return this;
    }

沒(méi)毛病啊,非常奇怪仇轻。為啥>┝ !E竦辍<酪! 然后就是各種google
加了 ReferenceCountUtil.release(in);

    in.readByte();
    int dataLength = remaining - 17;
    byte[] dataByte = new byte[dataLength];
    in.readBytes(dataByte);
    String data = new String(dataByte);
    in.readBytes(8);
    疲陕。方淤。。蹄殃。携茂。
    ReferenceCountUtil.release(in);

不但沒(méi)用,鏈接都報(bào)錯(cuò)了W缪摇;淇唷!7郧鸳谜!
接著開(kāi)始懷疑這個(gè)是不是netty自身的bug。式廷。咐扭。
換了版本還是有問(wèn)題!;稀;确尽!策严! 受不了K肽健!F薜肌9涿唷!
然后繼續(xù)思考人生倔韭。無(wú)意再次點(diǎn)擊看源碼术浪。。突然有一句mmp 不知當(dāng)講不當(dāng)講J僮谩R人铡!

 @Override
    public ByteBuf readBytes(int length) {
        checkReadableBytes(length);
        if (length == 0) {
            return Unpooled.EMPTY_BUFFER;
        }

        ByteBuf buf = alloc().buffer(length, maxCapacity);
        buf.writeBytes(this, readerIndex, length);
        readerIndex += length;
        return buf;
    }

.... readBytes方法返回新的byteBuf 醇疼?硕并?法焰?


image.png

那特么我剛開(kāi)始看是哪個(gè)源碼?倔毙?埃仪? 然后把整個(gè) AbstractByteBuf 看了一遍
內(nèi)心崩潰 readBytes 方法有很多,每個(gè)入?yún)⒉煌略撸牵卵蛉。。么库。傻丝。。?br> readBytes(int length) 這個(gè)是返回一個(gè)新的bytebuf 所以需要釋放掉K呷濉F乡帧!
弄了半天允睹,還是自己sb运准。從錯(cuò)誤中已經(jīng)明確提示哪一行沒(méi)有釋放,但是結(jié)果還是饒了這么多彎缭受。胁澳。。米者。韭畸。。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末蔓搞,一起剝皮案震驚了整個(gè)濱河市胰丁,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌喂分,老刑警劉巖锦庸,帶你破解...
    沈念sama閱讀 219,427評(píng)論 6 508
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異蒲祈,居然都是意外死亡甘萧,警方通過(guò)查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,551評(píng)論 3 395
  • 文/潘曉璐 我一進(jìn)店門梆掸,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái)扬卷,“玉大人,你說(shuō)我怎么就攤上這事酸钦」值茫” “怎么了?”我有些...
    開(kāi)封第一講書(shū)人閱讀 165,747評(píng)論 0 356
  • 文/不壞的土叔 我叫張陵,是天一觀的道長(zhǎng)徒恋。 經(jīng)常有香客問(wèn)我蚕断,道長(zhǎng),這世上最難降的妖魔是什么因谎? 我笑而不...
    開(kāi)封第一講書(shū)人閱讀 58,939評(píng)論 1 295
  • 正文 為了忘掉前任基括,我火速辦了婚禮,結(jié)果婚禮上财岔,老公的妹妹穿的比我還像新娘。我一直安慰自己河爹,他們只是感情好匠璧,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,955評(píng)論 6 392
  • 文/花漫 我一把揭開(kāi)白布。 她就那樣靜靜地躺著咸这,像睡著了一般夷恍。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上媳维,一...
    開(kāi)封第一講書(shū)人閱讀 51,737評(píng)論 1 305
  • 那天酿雪,我揣著相機(jī)與錄音,去河邊找鬼侄刽。 笑死指黎,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的州丹。 我是一名探鬼主播醋安,決...
    沈念sama閱讀 40,448評(píng)論 3 420
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼墓毒!你這毒婦竟也來(lái)了吓揪?” 一聲冷哼從身側(cè)響起,我...
    開(kāi)封第一講書(shū)人閱讀 39,352評(píng)論 0 276
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤所计,失蹤者是張志新(化名)和其女友劉穎柠辞,沒(méi)想到半個(gè)月后,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體主胧,經(jīng)...
    沈念sama閱讀 45,834評(píng)論 1 317
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡叭首,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,992評(píng)論 3 338
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了讥裤。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片放棒。...
    茶點(diǎn)故事閱讀 40,133評(píng)論 1 351
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖己英,靈堂內(nèi)的尸體忽然破棺而出间螟,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 35,815評(píng)論 5 346
  • 正文 年R本政府宣布厢破,位于F島的核電站荣瑟,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏摩泪。R本人自食惡果不足惜笆焰,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,477評(píng)論 3 331
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望见坑。 院中可真熱鬧嚷掠,春花似錦、人聲如沸荞驴。這莊子的主人今日做“春日...
    開(kāi)封第一講書(shū)人閱讀 32,022評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)熊楼。三九已至霹娄,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間鲫骗,已是汗流浹背犬耻。 一陣腳步聲響...
    開(kāi)封第一講書(shū)人閱讀 33,147評(píng)論 1 272
  • 我被黑心中介騙來(lái)泰國(guó)打工, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留执泰,地道東北人枕磁。 一個(gè)月前我還...
    沈念sama閱讀 48,398評(píng)論 3 373
  • 正文 我出身青樓,卻偏偏與公主長(zhǎng)得像坦胶,于是被迫代替她去往敵國(guó)和親透典。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 45,077評(píng)論 2 355