Netty UDP 接收緩沖區(qū) 報文截取問題

Netty UDP 報文截取問題

問題

  • 最近在寫一個 syslog udp 日志接收器织咧,然后發(fā)現(xiàn)接收過大的日志數(shù)據(jù)會被截斷幸乒,拿到的信息不完整

源碼追蹤

創(chuàng)建 udp server 的示例代碼

       def b = new Bootstrap()
        group = new NioEventLoopGroup()
        b.group(group)
                .channel(NioDatagramChannel.class)
                .localAddress(config.udp.port)
                .handler(new ChannelInitializer<DatagramChannel>() {
                    @Override
                    protected void initChannel(DatagramChannel datagramChannel) throws Exception {
                        ChannelPipeline channelPipeline = datagramChannel.pipeline()
                        channelPipeline.addLast(
                                new UDPSyslogMessageDecoder(),
                                new SyslogMessageHandler()
                        )

                        if (config.log) {
                            channelPipeline.addLast(new SyslogMessageLogHandler())
                        }

                        channelPipeline.addLast(new QianxinLogHandler(vertx,config))
                    }
                })

        startFuture = b.bind().sync()

NioDatagramChannel 初始化源碼追蹤

channel 使用 NioDatagramChannel 懦底,追蹤 NioDatagramChannel 源碼

  • 初始化 NioDatagramChannel
    io.netty.channel.socket.nio.NioDatagramChannel.NioDatagramChannel()
    public NioDatagramChannel() {
        this(newSocket(DEFAULT_SELECTOR_PROVIDER));
    }
  • 調(diào)用構造方法
    io.netty.channel.socket.nio.NioDatagramChannel#NioDatagramChannel(java.nio.channels.DatagramChannel)
    public NioDatagramChannel(DatagramChannel socket) {
        super(null, socket, SelectionKey.OP_READ);
        config = new NioDatagramChannelConfig(this, socket);
    }
  • 初始化 NioDatagramChannelConfig 配置信息
    io.netty.channel.socket.nio.NioDatagramChannelConfig.NioDatagramChannelConfig
    NioDatagramChannelConfig(NioDatagramChannel channel, DatagramChannel javaChannel) {
        super(channel, javaChannel.socket());
        this.javaChannel = javaChannel;
    }
  • 調(diào)用父類構造方法
    io.netty.channel.socket.DefaultDatagramChannelConfig#DefaultDatagramChannelConfig
    public DefaultDatagramChannelConfig(DatagramChannel channel, DatagramSocket javaSocket) {
        // 初始化 2048 字節(jié)的固定長度的接收緩沖區(qū)
        super(channel, new FixedRecvByteBufAllocator(2048));
        this.javaSocket = ObjectUtil.checkNotNull(javaSocket, "javaSocket");
    }

原因

NioDatagramChannel 默認緩沖區(qū)大小只給了 2048 ,開發(fā)一個 Syslog UDP 協(xié)議服務罕扎,日志大小其實就不止這么點聚唐,所以日志被截取一部分導致問題出現(xiàn)

解決方法

構建 Bootstrap 增加參數(shù)選項丐重,把默認 2048 固定緩沖區(qū)調(diào)大

實際構建代碼如下:

       def b = new Bootstrap()
        group = new NioEventLoopGroup()
        b.group(group)
                .channel(NioDatagramChannel.class)
                .localAddress(config.udp.port)
                // 增加下面這一行代碼 固定 64 k大小,這個根據(jù)實際情況調(diào)整
                .option(ChannelOption.RCVBUF_ALLOCATOR, new FixedRecvByteBufAllocator(65535))
                .handler(new ChannelInitializer<DatagramChannel>() {
                    @Override
                    protected void initChannel(DatagramChannel datagramChannel) throws Exception {
                        ChannelPipeline channelPipeline = datagramChannel.pipeline()
                        channelPipeline.addLast(
                                new UDPSyslogMessageDecoder(),
                                new SyslogMessageHandler()
                        )

                        if (config.log) {
                            channelPipeline.addLast(new SyslogMessageLogHandler())
                        }

                        channelPipeline.addLast(new QianxinLogHandler(vertx,config))
                    }
                })

        startFuture = b.bind().sync()
?著作權歸作者所有,轉載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末杆查,一起剝皮案震驚了整個濱河市扮惦,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌亲桦,老刑警劉巖崖蜜,帶你破解...
    沈念sama閱讀 206,126評論 6 481
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異烙肺,居然都是意外死亡纳猪,警方通過查閱死者的電腦和手機,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,254評論 2 382
  • 文/潘曉璐 我一進店門桃笙,熙熙樓的掌柜王于貴愁眉苦臉地迎上來氏堤,“玉大人,你說我怎么就攤上這事搏明∈笮猓” “怎么了?”我有些...
    開封第一講書人閱讀 152,445評論 0 341
  • 文/不壞的土叔 我叫張陵星著,是天一觀的道長购笆。 經(jīng)常有香客問我,道長虚循,這世上最難降的妖魔是什么同欠? 我笑而不...
    開封第一講書人閱讀 55,185評論 1 278
  • 正文 為了忘掉前任,我火速辦了婚禮横缔,結果婚禮上铺遂,老公的妹妹穿的比我還像新娘。我一直安慰自己茎刚,他們只是感情好襟锐,可當我...
    茶點故事閱讀 64,178評論 5 371
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著膛锭,像睡著了一般粮坞。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上初狰,一...
    開封第一講書人閱讀 48,970評論 1 284
  • 那天莫杈,我揣著相機與錄音,去河邊找鬼跷究。 笑死姓迅,一個胖子當著我的面吹牛,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播丁存,決...
    沈念sama閱讀 38,276評論 3 399
  • 文/蒼蘭香墨 我猛地睜開眼肩杈,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了解寝?” 一聲冷哼從身側響起扩然,我...
    開封第一講書人閱讀 36,927評論 0 259
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎聋伦,沒想到半個月后夫偶,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 43,400評論 1 300
  • 正文 獨居荒郊野嶺守林人離奇死亡觉增,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 35,883評論 2 323
  • 正文 我和宋清朗相戀三年兵拢,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片逾礁。...
    茶點故事閱讀 37,997評論 1 333
  • 序言:一個原本活蹦亂跳的男人離奇死亡说铃,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出嘹履,到底是詐尸還是另有隱情腻扇,我是刑警寧澤,帶...
    沈念sama閱讀 33,646評論 4 322
  • 正文 年R本政府宣布砾嫉,位于F島的核電站幼苛,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏焕刮。R本人自食惡果不足惜舶沿,卻給世界環(huán)境...
    茶點故事閱讀 39,213評論 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望配并。 院中可真熱鬧暑椰,春花似錦、人聲如沸荐绝。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,204評論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽低滩。三九已至,卻和暖如春岩喷,著一層夾襖步出監(jiān)牢的瞬間恕沫,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 31,423評論 1 260
  • 我被黑心中介騙來泰國打工纱意, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留婶溯,地道東北人。 一個月前我還...
    沈念sama閱讀 45,423評論 2 352
  • 正文 我出身青樓,卻偏偏與公主長得像迄委,于是被迫代替她去往敵國和親褐筛。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 42,722評論 2 345

推薦閱讀更多精彩內(nèi)容