Nginx websocket proxy斷連問題

由于項目中需要服務(wù)端向移動設(shè)備主動推送信令辟癌,于是引入websocket協(xié)議進(jìn)行移動設(shè)備和服務(wù)端之間的通信固惯。Demo程序很正常厂抽,服務(wù)端使用nodejs ws類庫起一個websocket服務(wù)器,android設(shè)備中使用Okhttp3-ws對接,一切都比較正常狭归。但是集成到生產(chǎn)環(huán)境kong api gateway后出現(xiàn)了連接一段時間android設(shè)備出現(xiàn)java.io.EOFException錯誤,服務(wù)端ws服務(wù)器出現(xiàn)1006錯誤文判,websocket連接斷開的問題过椎。

1.確定問題范圍

由于demo程序運行正常,生產(chǎn)環(huán)境與demo環(huán)境區(qū)別在于android設(shè)備和服務(wù)端之間使用kong api gateway工具進(jìn)行了proxy戏仓,kong是基于Nginx的api管理工具疚宇,于是問題分析重點鎖定gateway轉(zhuǎn)發(fā)的過程。

2.分析過程

首先抓包比對一下demo環(huán)境和生產(chǎn)環(huán)境區(qū)別赏殃。
demo環(huán)境wireshark包:


Paste_Image.png
Paste_Image.png

可以看到敷待,GET請求包和協(xié)議切換響應(yīng)包間隔很短。

kong 環(huán)境包:


Paste_Image.png
Paste_Image.png

Paste_Image.png

這里可以看出經(jīng)過Nginx轉(zhuǎn)發(fā)后的環(huán)境仁热,協(xié)議轉(zhuǎn)換包返回時間距離GET請求包發(fā)出間隔了62秒榜揖。
這個http 101包回來時,就導(dǎo)致了okhttp觸發(fā)Java.IO.EOLException異常抗蠢。
這個時間很有趣举哟,我在客戶端是在websocket連接收延時兩秒發(fā)出信息的,所以Latency時間恰好是60秒迅矛,而且每次都很穩(wěn)定妨猩,這個現(xiàn)象很像配置問題。
果然查了下資料秽褒,Nginx的官網(wǎng)文檔對websocket協(xié)議有說明:

By default, the connection will be closed if the proxied server does not transmit any data within 60 seconds. This timeout can be increased with the proxy_read_timeout directive. Alternatively, the proxied server can be configured to periodically send WebSocket ping frames to reset the timeout and check if the connection is still alive.

嘗試修改了read timeout的時間壶硅,果然出現(xiàn)斷連的時間隨著timeout而變化,應(yīng)該就是Nginx這個機(jī)制導(dǎo)致的销斟。文檔中也明確說明了解決方法森瘪,在時間間隔小于read timeout的輪詢中不斷和服務(wù)器進(jìn)行ping包發(fā)送來刷新timeout時間。
實際測試票堵,用20秒的間隔不斷給服務(wù)器發(fā)送心跳扼睬,可以保持websocket連接不斷。
但是還有一個問題,http upgarde包發(fā)出去后應(yīng)該要等http code 101 Switching Protocols這個包回來才算握手完成窗宇,才可以建立tcp長連接措伐,但是在nginx環(huán)境下這個包60秒后才回來,但是中間數(shù)據(jù)交互都是正常的军俊,讓人匪夷所思侥加。
再仔細(xì)看下nginx轉(zhuǎn)發(fā)wireshark包,發(fā)現(xiàn)http code 101 Switching Protocols包是由3片TCP包組裝而成的:

Paste_Image.png

第一幀序號23粪躬,找到后發(fā)現(xiàn)內(nèi)容就是服務(wù)器響應(yīng)握手的http報文內(nèi)容

Paste_Image.png

所以在25幀時實際已經(jīng)握手完成了担败,并非在62秒才傳包回來。
第二幀:

Paste_Image.png

傳遞的數(shù)據(jù)是connected.
這樣就和協(xié)議描述一致镰官,先完成handshake再transfer data提前。但是經(jīng)過nginx抓發(fā)的包一直沒有結(jié)束符,所以導(dǎo)致wireshark在斷連得時候才顯示該http報完成泳唠,此處不知是不是nginx websocket proxy的bug? 如果有大神知道還請指導(dǎo)狈网。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市笨腥,隨后出現(xiàn)的幾起案子拓哺,更是在濱河造成了極大的恐慌,老刑警劉巖脖母,帶你破解...
    沈念sama閱讀 217,084評論 6 503
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件士鸥,死亡現(xiàn)場離奇詭異,居然都是意外死亡谆级,警方通過查閱死者的電腦和手機(jī)烤礁,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,623評論 3 392
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來哨苛,“玉大人鸽凶,你說我怎么就攤上這事〗ㄇ停” “怎么了玻侥?”我有些...
    開封第一講書人閱讀 163,450評論 0 353
  • 文/不壞的土叔 我叫張陵,是天一觀的道長亿蒸。 經(jīng)常有香客問我凑兰,道長,這世上最難降的妖魔是什么边锁? 我笑而不...
    開封第一講書人閱讀 58,322評論 1 293
  • 正文 為了忘掉前任姑食,我火速辦了婚禮,結(jié)果婚禮上茅坛,老公的妹妹穿的比我還像新娘音半。我一直安慰自己则拷,他們只是感情好,可當(dāng)我...
    茶點故事閱讀 67,370評論 6 390
  • 文/花漫 我一把揭開白布曹鸠。 她就那樣靜靜地躺著煌茬,像睡著了一般。 火紅的嫁衣襯著肌膚如雪彻桃。 梳的紋絲不亂的頭發(fā)上坛善,一...
    開封第一講書人閱讀 51,274評論 1 300
  • 那天,我揣著相機(jī)與錄音邻眷,去河邊找鬼眠屎。 笑死,一個胖子當(dāng)著我的面吹牛肆饶,可吹牛的內(nèi)容都是我干的改衩。 我是一名探鬼主播,決...
    沈念sama閱讀 40,126評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼抖拴,長吁一口氣:“原來是場噩夢啊……” “哼燎字!你這毒婦竟也來了腥椒?” 一聲冷哼從身側(cè)響起阿宅,我...
    開封第一講書人閱讀 38,980評論 0 275
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎笼蛛,沒想到半個月后洒放,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 45,414評論 1 313
  • 正文 獨居荒郊野嶺守林人離奇死亡滨砍,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 37,599評論 3 334
  • 正文 我和宋清朗相戀三年往湿,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片惋戏。...
    茶點故事閱讀 39,773評論 1 348
  • 序言:一個原本活蹦亂跳的男人離奇死亡领追,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出响逢,到底是詐尸還是另有隱情绒窑,我是刑警寧澤,帶...
    沈念sama閱讀 35,470評論 5 344
  • 正文 年R本政府宣布舔亭,位于F島的核電站些膨,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏钦铺。R本人自食惡果不足惜订雾,卻給世界環(huán)境...
    茶點故事閱讀 41,080評論 3 327
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望矛洞。 院中可真熱鬧洼哎,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,713評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至壕探,卻和暖如春冈钦,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背李请。 一陣腳步聲響...
    開封第一講書人閱讀 32,852評論 1 269
  • 我被黑心中介騙來泰國打工瞧筛, 沒想到剛下飛機(jī)就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人导盅。 一個月前我還...
    沈念sama閱讀 47,865評論 2 370
  • 正文 我出身青樓较幌,卻偏偏與公主長得像,于是被迫代替她去往敵國和親白翻。 傳聞我的和親對象是個殘疾皇子乍炉,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 44,689評論 2 354

推薦閱讀更多精彩內(nèi)容

  • Spring Cloud為開發(fā)人員提供了快速構(gòu)建分布式系統(tǒng)中一些常見模式的工具(例如配置管理,服務(wù)發(fā)現(xiàn)滤馍,斷路器岛琼,智...
    卡卡羅2017閱讀 134,654評論 18 139
  • 最近筆者新參與的一個web項目,擬定采用vue2.0來編寫巢株,期間遇到有關(guān)使用websocket的問題槐瑞,記錄一下,個...
    七寶琥珀閱讀 44,011評論 6 35
  • 我們用websocket和http來研究一下TCP/IP協(xié)議的一些特性阁苞,在上一篇文章《https連接的前幾毫秒發(fā)生...
    極樂君閱讀 1,935評論 1 6
  • 我們用websocket和http來研究一下TCP/IP協(xié)議的一些特性困檩,在上一篇文章《https連接的前幾毫秒發(fā)生...
    啾啾噠閱讀 510評論 0 1
  • 在我畢業(yè)一年來,一直會碰到一些人問我這樣的一些問題: 想要去從事某一個行業(yè)那槽,如何啟動悼沿?我在這個行業(yè)做了一兩年了,感...
    生椒牛肉閱讀 1,203評論 1 9