TCP粘包、斷包處理

在TCP傳輸中泵殴,當(dāng)我們使用長連接傳輸數(shù)據(jù)時涮帘,由于傳輸頻率快、緩沖區(qū)不足等問題笑诅,經(jīng)常會產(chǎn)生斷包调缨、粘包的問題,本文將基于java講述TCP協(xié)議中這兩個問題的解決吆你。

首先弦叶,簡單介紹一下粘包、斷包問題產(chǎn)生的原因

粘包的產(chǎn)生:粘包可能在服務(wù)端產(chǎn)生也可能在客戶斷產(chǎn)生妇多。提交數(shù)據(jù)給tcp發(fā)送時伤哺,TCP并不立刻發(fā)送此段數(shù)據(jù),而是等待一小段時間,看看在等待期間是否還有要發(fā)送的數(shù)據(jù),若有則會一次把這兩段數(shù)據(jù)發(fā)送出去,造成粘包者祖;另一端在接收到數(shù)據(jù)庫后默责,放到緩沖區(qū)中,如果消息沒有被及時從緩存區(qū)取走咸包,下次在取數(shù)據(jù)的時候可能就會出現(xiàn)一次取出多個數(shù)據(jù)包的情況,造成粘包現(xiàn)象杖虾。

斷包的產(chǎn)生:使用TCP傳送數(shù)據(jù)時烂瘫,有可能數(shù)據(jù)過大,使得發(fā)送方緩沖區(qū)無法一次發(fā)送奇适,造成另一端只收到的數(shù)據(jù)不完整坟比,所以要等待數(shù)據(jù)完全接收到再解析數(shù)據(jù)。

粘包嚷往、斷包示例

以上均引用自http://blog.csdn.net/chen199199/article/details/50564015

要處理粘包和斷包葛账,關(guān)鍵點是在傳輸?shù)囊粠瑪?shù)據(jù)中加入包頭和包尾,如果有需要可以加入幀長來表征數(shù)據(jù)長度皮仁。

廢話不多說籍琳,直接上代碼,首先贷祈,建立TCP連接趋急,為長連接做準(zhǔn)備。

            //1.與設(shè)備建立連接
            Socket realDataSck = new Socket();
            SocketAddress socketAddress = new InetSocketAddress(deviceIp, devicePort);
            //確保在網(wǎng)絡(luò)不通暢或設(shè)備故障的情況下也能持續(xù)連接
            while (true) {
                try {
                    realDataSck.connect(socketAddress, 2000);
                    break;
                } catch (Exception e) {
                    System.out.println("重連");
                    realDataSck.close();
                    realDataSck = new Socket();
                }

            }
            realDataSck.setSoTimeout(2000);
            //2.準(zhǔn)備請求
            OutputStream os = realDataSck.getOutputStream();
            InputStream is = realDataSck.getInputStream();

接下來是處理粘包势誊、斷包的關(guān)鍵代碼了:

            //開啟一個隊列用于存放TCP數(shù)據(jù)
            List<Byte> queueFinal = new LinkedList<Byte>();
            //定義包頭包尾
            byte[] head = {-54, -53, -52, -51};
            byte[] tail = {-22, -21, -20, -19, 97, 103, 92, 20, -119, -58};
            int headIndex = -1;
            int tailIndex = -1;

            os.write("ff".getBytes());
            //3.建立長連接
            while (true) {
                //判斷遠端服務(wù)器是否斷開連接了
                if (!isServerClose(realDataSck)) {
                    //3.接收雷達返回的數(shù)據(jù)
                    //判斷輸入流是否有數(shù)據(jù)呜达,如果沒有則等待10ms
                    if (is.available() > 0) {
                        int len = is.available();
                        byte buf[] = new byte[len];
                        is.read(buf, 0, len);
                        //將數(shù)據(jù)全部存入臨時緩沖區(qū)
                        for (byte b : buf) {
                            queueFinal.add(b);
                        }
                        //4.處理斷包、粘包
                        while (true) {
                            headIndex = RadarUtil.indexOfArray(queueFinal, head);
                            tailIndex = RadarUtil.indexOfArray(queueFinal, tail);

                            if (headIndex >= 0 && tailIndex >= 0 && headIndex < tailIndex) {
                                byte[] bytesFinal = new byte[tailIndex + 10 - headIndex];
                                //找到了包頭包尾粟耻,則提取出一幀放入字節(jié)緩沖區(qū),如有多幀數(shù)據(jù)直接覆蓋查近,同時扔掉隊列緩沖區(qū)中包頭前的多余字節(jié)
                                for (int i = 0; i < headIndex; i++) {
                                    queueFinal.remove(0);
                                }
                                
                                for (int i = 0; i < bytesFinal.length; i++) {
                                    bytesFinal[i] = queueFinal.get(0);
                                    queueFinal.remove(0);
                                }

                                //解析雷達數(shù)據(jù)并存入數(shù)據(jù)庫
                                operateRealTimeData(interSectionId, dir, deviceNo, lanes, deviceIp, devicePort, conn, stmt, bytesFinal);

                                //粘包眉踱,即包尾后還有內(nèi)容,如果沒有粘包則繼續(xù)發(fā)送tcp請求收取下一幀數(shù)據(jù)
                                if (queueFinal.size() > 0) {
                                    System.out.println("粘包了");
                                } else {
                                    Thread.sleep(60);
                                    os.write("ff".getBytes());
                                    break;
                                }

                            } else if (headIndex >= 0 && tailIndex == -1 || headIndex == -1 && tailIndex == -1) {
                                //斷包霜威,即接收到的包不完整谈喳,則跳出內(nèi)圈循環(huán),進入外圈循環(huán)侥祭,從輸入流中繼續(xù)讀取數(shù)據(jù)
                                System.out.println("斷包了");
                                Thread.sleep(10);
                                break;
                            } else if ((headIndex == -1 && tailIndex >= 0) || headIndex > tailIndex) {
                                //殘包叁执,即只找到包尾或包頭在包尾后面,則扔掉隊列緩沖區(qū)中包尾及其之前的多余字節(jié)
                                System.out.println("殘包了");
                                for (int i = 0; i < tailIndex + 10; i++) {
                                    queueFinal.remove(0);
                                }
                                //如果扔掉后隊列緩沖區(qū)中為空矮冬,則可以直接進行下一輪tcp請求谈宛,否則跳出內(nèi)圈循環(huán),進入外圈循環(huán)胎署,從輸入流中繼續(xù)讀取數(shù)據(jù)
                                if (queueFinal.size() == 0) {
                                    Thread.sleep(60);
                                    os.write("ff".getBytes());
                                    break;
                                }
                            }

                        }

                    } else {
                        Thread.sleep(10);
                    }
                } else {
                    //如果斷開了吆录,持續(xù)重連
                    Thread.sleep(1000);
                    os.close();
                    realDataSck.close();

                    realDataSck = new Socket();
                    socketAddress = new InetSocketAddress(deviceIp, devicePort);
                    //確保在網(wǎng)絡(luò)不通暢或雷達設(shè)備故障的情況下也能持續(xù)連接
                    while (true) {
                        try {
                            realDataSck.connect(socketAddress, 2000);
                            break;
                        } catch (Exception e) {
                            System.out.println("重連");
                            realDataSck.close();
                            realDataSck = new Socket();
                        }

                    }
                    realDataSck.setSoTimeout(2000);
                    os = realDataSck.getOutputStream();
                    is = realDataSck.getInputStream();
                    queueFinal = new LinkedList<Byte>();
                }
            }

在上述代碼中,首先琼牧,定義一個隊列緩沖區(qū)用于存放數(shù)據(jù)恢筝,并記錄你的包頭包尾。隨后巨坊,通過外圈的while語句建立長連接撬槽,當(dāng)判斷出遠端服務(wù)器仍然連接著,便去讀取輸入流中接收的數(shù)據(jù)趾撵,否則持續(xù)重連侄柔,由于無關(guān)題目不再贅述。

處理粘包占调、斷包的思路大致如下暂题,先是將輸入流接到的數(shù)據(jù)放入隊列緩沖區(qū),隨后進入內(nèi)圈while循環(huán)究珊,從隊列中找包頭包尾薪者,根據(jù)找包頭包尾的情況來判斷數(shù)據(jù)幀是否發(fā)生粘包、斷包剿涮。

此時言津,可能會有以下多種情況:
1、找到了包頭包尾取试,且包頭在包尾之前形成了完整的一幀纺念,此時即可將此幀從隊列中拿出來扔到你的后續(xù)環(huán)節(jié)中處理。如果此時包頭前有數(shù)據(jù)無法形成完整一幀想括,則可以直接扔掉陷谱;包尾后有數(shù)據(jù)說明發(fā)生粘包,應(yīng)繼續(xù)內(nèi)圈循環(huán),判斷發(fā)生粘包的數(shù)據(jù)是否能形成一幀烟逊。
2渣窜、找到了包頭卻沒有包尾,又或者包頭包尾都找不到宪躯,此時可以統(tǒng)一處理乔宿,直接跳出內(nèi)圈循環(huán),到外圈循環(huán)里访雪,從輸入流中繼續(xù)讀取數(shù)據(jù)直至形成完整一幀详瑞。
3、找到了包尾卻沒有包頭臣缀,此時這一幀為殘包坝橡,可以扔掉隊列緩沖區(qū)中包尾及其之前的多余字節(jié)。

以上精置,基本可以處理粘包计寇、斷包的問題了,代碼中都有詳細注釋脂倦。

github傳送地址:https://github.com/JunJieDing666/CityBrainMiddleware
具體代碼路徑:src/com/djj/middleware/utils/RadarUtil.java

若有錯誤煩請指出番宁,有地方不理解歡迎討論。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末赖阻,一起剝皮案震驚了整個濱河市蝶押,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌火欧,老刑警劉巖棋电,帶你破解...
    沈念sama閱讀 206,482評論 6 481
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異布隔,居然都是意外死亡,警方通過查閱死者的電腦和手機稼虎,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,377評論 2 382
  • 文/潘曉璐 我一進店門衅檀,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人霎俩,你說我怎么就攤上這事哀军。” “怎么了打却?”我有些...
    開封第一講書人閱讀 152,762評論 0 342
  • 文/不壞的土叔 我叫張陵杉适,是天一觀的道長。 經(jīng)常有香客問我柳击,道長猿推,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 55,273評論 1 279
  • 正文 為了忘掉前任,我火速辦了婚禮蹬叭,結(jié)果婚禮上藕咏,老公的妹妹穿的比我還像新娘。我一直安慰自己秽五,他們只是感情好孽查,可當(dāng)我...
    茶點故事閱讀 64,289評論 5 373
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著坦喘,像睡著了一般盲再。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上瓣铣,一...
    開封第一講書人閱讀 49,046評論 1 285
  • 那天答朋,我揣著相機與錄音,去河邊找鬼坯沪。 笑死绿映,一個胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的腐晾。 我是一名探鬼主播叉弦,決...
    沈念sama閱讀 38,351評論 3 400
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼藻糖!你這毒婦竟也來了淹冰?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 36,988評論 0 259
  • 序言:老撾萬榮一對情侶失蹤巨柒,失蹤者是張志新(化名)和其女友劉穎樱拴,沒想到半個月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體洋满,經(jīng)...
    沈念sama閱讀 43,476評論 1 300
  • 正文 獨居荒郊野嶺守林人離奇死亡晶乔,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 35,948評論 2 324
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了牺勾。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片正罢。...
    茶點故事閱讀 38,064評論 1 333
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖驻民,靈堂內(nèi)的尸體忽然破棺而出翻具,到底是詐尸還是另有隱情,我是刑警寧澤回还,帶...
    沈念sama閱讀 33,712評論 4 323
  • 正文 年R本政府宣布裆泳,位于F島的核電站,受9級特大地震影響柠硕,放射性物質(zhì)發(fā)生泄漏工禾。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點故事閱讀 39,261評論 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望帜篇。 院中可真熱鬧糙捺,春花似錦、人聲如沸笙隙。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,264評論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽竟痰。三九已至签钩,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間坏快,已是汗流浹背铅檩。 一陣腳步聲響...
    開封第一講書人閱讀 31,486評論 1 262
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留莽鸿,地道東北人昧旨。 一個月前我還...
    沈念sama閱讀 45,511評論 2 354
  • 正文 我出身青樓,卻偏偏與公主長得像祥得,于是被迫代替她去往敵國和親兔沃。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 42,802評論 2 345

推薦閱讀更多精彩內(nèi)容

  • 在socket網(wǎng)絡(luò)程序中级及,TCP和UDP分別是面向連接和非面向連接的乒疏。因此TCP的socket編程,收發(fā)兩端(客戶...
    樹根曰閱讀 5,940評論 1 16
  • TCP(transport control protocol,傳輸控制協(xié)議)是面向連接的县踢,面向流的转绷,提供高可靠性服...
    ylbkoo閱讀 1,314評論 0 1
  • 簡介 用簡單的話來定義tcpdump,就是:dump the traffic on a network硼啤,根據(jù)使用者...
    保川閱讀 5,941評論 1 13
  • LT-0807议经,2018.03.11翻譯,@成都 聲明 本文是一篇關(guān)于TCP/IP協(xié)議組件的RFC丙曙,聚焦于一個IP...
    摩訶婆羅多閱讀 4,065評論 1 5
  • 新媒體運營的精和真(2) 為了傳播正面的爸业,積極地其骄、人們需要知道的東西亏镰,所以這方面要善于總結(jié),并且學(xué)會創(chuàng)新拯爽。線上的內(nèi)...
    硌得慌犯困閱讀 146評論 0 0