記服務(wù)上線的一個(gè)坑

經(jīng)過(guò)

今天將測(cè)試環(huán)境中測(cè)試通過(guò)后的服務(wù)很小心地不熟到線上后新博,自以為萬(wàn)事大吉,就坐等客戶(hù)端發(fā)布版本了桃纯。誰(shuí)知道測(cè)試在驗(yàn)證正式環(huán)境的服務(wù)時(shí)酷誓,不斷地報(bào)超時(shí)。而這在測(cè)試環(huán)境中是經(jīng)過(guò)多次的測(cè)試态坦,并且都是通過(guò)的盐数,真是日了個(gè)狗的。第一反應(yīng)當(dāng)然是懷疑自己部署到線上的時(shí)候伞梯,是否配置弄錯(cuò)了玫氢。查了大半天帚屉,都是一樣的!由于版本未發(fā)琐旁,因此就在正式環(huán)境中打些日志出來(lái)涮阔,看看發(fā)生了什么事情。后來(lái)定位到灰殴,是一個(gè)PHP前端將客戶(hù)端發(fā)來(lái)的包轉(zhuǎn)到后端服務(wù)的時(shí)候敬特,后端服務(wù)收到的包得長(zhǎng)度總是為0,后端服務(wù)由于請(qǐng)求為0牺陶,因此就沒(méi)有響應(yīng)返回伟阔,導(dǎo)致PHP前端總是超時(shí)。真是日了個(gè)狗的掰伸,而此時(shí)經(jīng)理和一群隊(duì)友都在等著我解決問(wèn)題皱炉,腦袋也不靈活了,不斷地懷疑自己究竟是哪里配錯(cuò)了狮鸭,正式環(huán)境跟測(cè)試環(huán)境究竟哪里有不同之處合搅。找了好長(zhǎng)時(shí)間,都沒(méi)有找到問(wèn)題歧蕉。后來(lái)灾部,由于在抓包的時(shí)候,發(fā)現(xiàn)后端服務(wù)監(jiān)聽(tīng)的端口的流量有異常惯退,就懷疑是不是監(jiān)聽(tīng)的端口有問(wèn)題赌髓。于是就將監(jiān)聽(tīng)的端口有5000換到82222。神奇的一幕發(fā)生了催跪,服務(wù)正常了... ...估計(jì)锁蠕,有大量的包長(zhǎng)度為0的包發(fā)送到5000端口,然后導(dǎo)致PHP前端發(fā)送的包都給丟掉了... ...這次真是踩到了坑上了懊蒸,這從下午五點(diǎn)荣倾,一直查找問(wèn)題到晚上九點(diǎn)多才解決... ...

總結(jié)

  1. 百度內(nèi)部的坑多,踩到了只能認(rèn)栽
  2. 一開(kāi)始榛鼎,用tcpdump抓包的時(shí)候逃呼,是發(fā)現(xiàn)到5000端口有異常的流量過(guò)來(lái)的,但是沒(méi)有太留意者娱,這只能說(shuō)自己的經(jīng)驗(yàn)還是不足。如果能對(duì)這敏感些苏揣,說(shuō)不定很快就解決問(wèn)題了黄鳍,而不是總是懷疑自己的配置有問(wèn)題。
  3. 今天的壓力太大了平匈,又累框沟,一堆人圍著藏古,又心急,導(dǎo)致腦袋都不正常使用了忍燥。如果使用的環(huán)境能標(biāo)準(zhǔn)化一些拧晕,上線流程嫩更加自動(dòng)化一些,估計(jì)就不會(huì)懷疑是自己配置的問(wèn)題了梅垄。
  4. 問(wèn)題估計(jì)最大的還是測(cè)試跟線上的環(huán)境不一致厂捞,導(dǎo)致服務(wù)從部署得到線上時(shí)容易出現(xiàn)問(wèn)題。哎队丝,這個(gè)也不是自己能夠解決的靡馁,有歷史遺留的問(wèn)題。
最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末机久,一起剝皮案震驚了整個(gè)濱河市臭墨,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌膘盖,老刑警劉巖胧弛,帶你破解...
    沈念sama閱讀 210,835評(píng)論 6 490
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異侠畔,居然都是意外死亡结缚,警方通過(guò)查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 89,900評(píng)論 2 383
  • 文/潘曉璐 我一進(jìn)店門(mén)践图,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái)掺冠,“玉大人,你說(shuō)我怎么就攤上這事码党〉抡福” “怎么了?”我有些...
    開(kāi)封第一講書(shū)人閱讀 156,481評(píng)論 0 345
  • 文/不壞的土叔 我叫張陵揖盘,是天一觀的道長(zhǎng)眉厨。 經(jīng)常有香客問(wèn)我,道長(zhǎng)兽狭,這世上最難降的妖魔是什么憾股? 我笑而不...
    開(kāi)封第一講書(shū)人閱讀 56,303評(píng)論 1 282
  • 正文 為了忘掉前任,我火速辦了婚禮箕慧,結(jié)果婚禮上服球,老公的妹妹穿的比我還像新娘。我一直安慰自己颠焦,他們只是感情好斩熊,可當(dāng)我...
    茶點(diǎn)故事閱讀 65,375評(píng)論 5 384
  • 文/花漫 我一把揭開(kāi)白布。 她就那樣靜靜地躺著伐庭,像睡著了一般粉渠。 火紅的嫁衣襯著肌膚如雪分冈。 梳的紋絲不亂的頭發(fā)上,一...
    開(kāi)封第一講書(shū)人閱讀 49,729評(píng)論 1 289
  • 那天霸株,我揣著相機(jī)與錄音雕沉,去河邊找鬼。 笑死去件,一個(gè)胖子當(dāng)著我的面吹牛坡椒,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播箫攀,決...
    沈念sama閱讀 38,877評(píng)論 3 404
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼肠牲,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼!你這毒婦竟也來(lái)了靴跛?” 一聲冷哼從身側(cè)響起缀雳,我...
    開(kāi)封第一講書(shū)人閱讀 37,633評(píng)論 0 266
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎梢睛,沒(méi)想到半個(gè)月后肥印,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 44,088評(píng)論 1 303
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡绝葡,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 36,443評(píng)論 2 326
  • 正文 我和宋清朗相戀三年深碱,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片藏畅。...
    茶點(diǎn)故事閱讀 38,563評(píng)論 1 339
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡敷硅,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出愉阎,到底是詐尸還是另有隱情绞蹦,我是刑警寧澤,帶...
    沈念sama閱讀 34,251評(píng)論 4 328
  • 正文 年R本政府宣布榜旦,位于F島的核電站幽七,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏溅呢。R本人自食惡果不足惜澡屡,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 39,827評(píng)論 3 312
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望咐旧。 院中可真熱鬧驶鹉,春花似錦、人聲如沸铣墨。這莊子的主人今日做“春日...
    開(kāi)封第一講書(shū)人閱讀 30,712評(píng)論 0 21
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)踏兜。三九已至词顾,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間碱妆,已是汗流浹背肉盹。 一陣腳步聲響...
    開(kāi)封第一講書(shū)人閱讀 31,943評(píng)論 1 264
  • 我被黑心中介騙來(lái)泰國(guó)打工, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留疹尾,地道東北人上忍。 一個(gè)月前我還...
    沈念sama閱讀 46,240評(píng)論 2 360
  • 正文 我出身青樓,卻偏偏與公主長(zhǎng)得像纳本,于是被迫代替她去往敵國(guó)和親窍蓝。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 43,435評(píng)論 2 348

推薦閱讀更多精彩內(nèi)容

  • Spring Cloud為開(kāi)發(fā)人員提供了快速構(gòu)建分布式系統(tǒng)中一些常見(jiàn)模式的工具(例如配置管理繁成,服務(wù)發(fā)現(xiàn)吓笙,斷路器,智...
    卡卡羅2017閱讀 134,626評(píng)論 18 139
  • Android 自定義View的各種姿勢(shì)1 Activity的顯示之ViewRootImpl詳解 Activity...
    passiontim閱讀 171,726評(píng)論 25 707
  • 轉(zhuǎn)自:http://ju.outofmemory.cn/entry/255894 概述自從docker容器出現(xiàn)以來(lái)...
    dleyanlin閱讀 1,507評(píng)論 0 7
  • 困了π_π巾腕,本來(lái)打算七八點(diǎn)就寫(xiě)的面睛,逛個(gè)空間又百度下邯鄲,再逛個(gè)途牛尊搬,拖到現(xiàn)在叁鉴,都困了~拖延歸拖延,寫(xiě)還是要寫(xiě)的佛寿。為...
    黑曼木木閱讀 221評(píng)論 1 1
  • 從不知道幌墓,自己竟是那樣害怕孤獨(dú)的一個(gè)人。我對(duì)它避之不及冀泻,然而它卻像是毒素一般常侣,早已在不知不覺(jué)中深入我五臟六腑,滲...
    慕微閱讀 297評(píng)論 0 0