繞過(guò)慣性思維去處理問(wèn)題

家里有做程序員的領(lǐng)導(dǎo)查邢,他曾經(jīng)說(shuō)過(guò)的工作中出錯(cuò)的一件事情讓我印象深刻!

那次他們負(fù)責(zé)一個(gè)24小時(shí)運(yùn)轉(zhuǎn)的大型工廠項(xiàng)目酵幕,就是在廠區(qū)有多個(gè)工作站扰藕,將各自負(fù)責(zé) 數(shù)據(jù)收集后傳至服務(wù)器處理。軟件系統(tǒng)上線運(yùn)行后芳撒,發(fā)現(xiàn)有時(shí)工作站在運(yùn)行過(guò)程中會(huì)偶爾不明原因死機(jī)邓深,但是現(xiàn)場(chǎng)工作人員一般直接重啟一下電腦就又正常運(yùn)行了。因?yàn)閿?shù)據(jù)都已實(shí)時(shí)上傳備份至服務(wù)器笔刹,工作站重啟后也沒(méi)什么影響芥备,次數(shù)不多,大家也都基本忽略了這個(gè)問(wèn)題的存在舌菜。(更何況造成電腦死機(jī)的原因很多萌壳,不一定是軟件方面的問(wèn)題。)

直到有一次,半夜被現(xiàn)場(chǎng)人員緊急呼叫:整個(gè)廠區(qū)的工作站都死機(jī)袱瓮!整個(gè)廠區(qū)工作接近癱瘓了缤骨!

于是緊急排查,發(fā)現(xiàn)是服務(wù)器死機(jī)尺借!

為什么服務(wù)器死機(jī)會(huì)造成所有工作站死機(jī)绊起?!

追蹤代碼發(fā)現(xiàn)是代碼里一個(gè)小bug褐望!

原來(lái)工作站向服務(wù)器發(fā)送數(shù)據(jù)時(shí)的 步驟是:第一步:向服務(wù)器發(fā)送握手信號(hào)(表明我要發(fā)送數(shù)據(jù)了)勒庄;第二步:服務(wù)器接收到握手信號(hào)后向工作站發(fā)送一個(gè)已經(jīng)準(zhǔn)備接收數(shù)據(jù)的信號(hào);第三步:工作站收到服務(wù)器準(zhǔn)備接收的消息后瘫里,開(kāi)始發(fā)送數(shù)據(jù)实蔽;第四步:完成!

乍看之下谨读,沒(méi)有任何問(wèn)題局装,步驟明確!可是問(wèn)題就出在第一第二步上劳殖!沒(méi)有考慮到特殊情況铐尚!

當(dāng)?shù)谝徊焦ぷ髡景l(fā)送握手信號(hào)時(shí),默認(rèn)就在等第二步的回應(yīng)了哆姻!可是當(dāng)服務(wù)器有問(wèn)題(死機(jī))時(shí)宣增,它沒(méi)有給工作站回復(fù)握手信號(hào),然后工作站就一直在等待中……直到工作人員認(rèn)為它死機(jī)了……

為什么以前工作站死機(jī)再重啟就好了矛缨?

因?yàn)闄C(jī)房有工作人員將服務(wù)器已經(jīng)重啟了爹脾,所以工作站再重啟就好了!

為什么這次全部工作站都死機(jī)箕昭?

因?yàn)闄C(jī)房服務(wù)器值班人員脫崗了灵妨!長(zhǎng)時(shí)間沒(méi)有發(fā)現(xiàn)服務(wù)器死機(jī)!

等等落竹?泌霍!為什么會(huì)有機(jī)房服務(wù)器工作人員脫崗?述召!服務(wù)器有專人看著朱转?!是的积暖!因?yàn)樵瓉?lái)發(fā)現(xiàn)服務(wù)器有過(guò)這樣現(xiàn)象所以安排了值班人員24小時(shí)值班肋拔,專門(mén)看管服務(wù)器,任務(wù)就是在發(fā)現(xiàn)服務(wù)器死機(jī)后立刻最快時(shí)間重啟呀酸!

傲狗洹?!問(wèn)了現(xiàn)場(chǎng)負(fù)責(zé)的為什么這樣操作窿吩,對(duì)方說(shuō)人家廠區(qū)一直都是這樣茎杂,以前的系統(tǒng)也是這樣,機(jī)房服務(wù)器工作人員24小時(shí)值班纫雁,主要的任務(wù)就是負(fù)責(zé)各種服務(wù)器重啟煌往!

這邊以最快速度加了幾行代碼!

在工作站端加了一個(gè)容錯(cuò)處理轧邪,當(dāng)工作站準(zhǔn)備傳數(shù)據(jù)時(shí)刽脖,在*秒內(nèi)等不到服務(wù)器的回應(yīng),就暫存數(shù)據(jù)在本地忌愚,然后處理下一個(gè)任務(wù)曲管。順便給服務(wù)器發(fā)送一個(gè)讓服務(wù)器重啟的命令!然后在下一個(gè)時(shí)間段再嘗試去和服務(wù)器連接硕糊!

死機(jī)的問(wèn)題完美解決院水!順便解決了機(jī)房必須24小時(shí)小心翼翼值班的問(wèn)題!(不用再刻意時(shí)刻關(guān)注是否死機(jī)了)

問(wèn)題的根本就是大家都是在以慣性思維去解決問(wèn)題简十,最初寫(xiě)代碼的程序員默認(rèn)服務(wù)器永遠(yuǎn)都不會(huì)出問(wèn)題檬某,沒(méi)有考慮過(guò)服務(wù)器也會(huì)死機(jī)!而機(jī)房的工作人員也以為服務(wù)器重啟必須靠人工來(lái)解決螟蝙,根本沒(méi)想過(guò)讓軟件自身來(lái)處理這個(gè)問(wèn)題恢恼!心疼那些值了好多夜班的機(jī)房工作人員!




圖片發(fā)自簡(jiǎn)書(shū)App
最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末胰默,一起剝皮案震驚了整個(gè)濱河市厅瞎,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌初坠,老刑警劉巖,帶你破解...
    沈念sama閱讀 211,561評(píng)論 6 492
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件彭雾,死亡現(xiàn)場(chǎng)離奇詭異碟刺,居然都是意外死亡,警方通過(guò)查閱死者的電腦和手機(jī)薯酝,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 90,218評(píng)論 3 385
  • 文/潘曉璐 我一進(jìn)店門(mén)半沽,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái),“玉大人吴菠,你說(shuō)我怎么就攤上這事者填。” “怎么了做葵?”我有些...
    開(kāi)封第一講書(shū)人閱讀 157,162評(píng)論 0 348
  • 文/不壞的土叔 我叫張陵占哟,是天一觀的道長(zhǎng)。 經(jīng)常有香客問(wèn)我,道長(zhǎng)榨乎,這世上最難降的妖魔是什么怎燥? 我笑而不...
    開(kāi)封第一講書(shū)人閱讀 56,470評(píng)論 1 283
  • 正文 為了忘掉前任,我火速辦了婚禮蜜暑,結(jié)果婚禮上铐姚,老公的妹妹穿的比我還像新娘。我一直安慰自己肛捍,他們只是感情好隐绵,可當(dāng)我...
    茶點(diǎn)故事閱讀 65,550評(píng)論 6 385
  • 文/花漫 我一把揭開(kāi)白布。 她就那樣靜靜地躺著拙毫,像睡著了一般依许。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上恬偷,一...
    開(kāi)封第一講書(shū)人閱讀 49,806評(píng)論 1 290
  • 那天悍手,我揣著相機(jī)與錄音,去河邊找鬼袍患。 笑死坦康,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的诡延。 我是一名探鬼主播滞欠,決...
    沈念sama閱讀 38,951評(píng)論 3 407
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼肆良!你這毒婦竟也來(lái)了筛璧?” 一聲冷哼從身側(cè)響起,我...
    開(kāi)封第一講書(shū)人閱讀 37,712評(píng)論 0 266
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤惹恃,失蹤者是張志新(化名)和其女友劉穎夭谤,沒(méi)想到半個(gè)月后,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體巫糙,經(jīng)...
    沈念sama閱讀 44,166評(píng)論 1 303
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡朗儒,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 36,510評(píng)論 2 327
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了参淹。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片醉锄。...
    茶點(diǎn)故事閱讀 38,643評(píng)論 1 340
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖浙值,靈堂內(nèi)的尸體忽然破棺而出恳不,到底是詐尸還是另有隱情,我是刑警寧澤开呐,帶...
    沈念sama閱讀 34,306評(píng)論 4 330
  • 正文 年R本政府宣布烟勋,位于F島的核電站规求,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏神妹。R本人自食惡果不足惜颓哮,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 39,930評(píng)論 3 313
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望鸵荠。 院中可真熱鬧冕茅,春花似錦、人聲如沸蛹找。這莊子的主人今日做“春日...
    開(kāi)封第一講書(shū)人閱讀 30,745評(píng)論 0 21
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)庸疾。三九已至乍楚,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間届慈,已是汗流浹背徒溪。 一陣腳步聲響...
    開(kāi)封第一講書(shū)人閱讀 31,983評(píng)論 1 266
  • 我被黑心中介騙來(lái)泰國(guó)打工, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留金顿,地道東北人臊泌。 一個(gè)月前我還...
    沈念sama閱讀 46,351評(píng)論 2 360
  • 正文 我出身青樓,卻偏偏與公主長(zhǎng)得像揍拆,于是被迫代替她去往敵國(guó)和親渠概。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 43,509評(píng)論 2 348

推薦閱讀更多精彩內(nèi)容