【技術(shù)類匯報(bào)】04 | 邏輯順序-時(shí)間與重要性:如何復(fù)盤(pán)運(yùn)營(yíng)事故蔬芥?

金字塔原理中的邏輯順序

結(jié)論先行梆靖,至上而下,可以幫助我們確定論點(diǎn)笔诵,目標(biāo)返吻,繼而確定大標(biāo)題,小標(biāo)題 乎婿,在標(biāo)題之下的演示文稿的內(nèi)容的就是分論點(diǎn)或者論據(jù)测僵。那么問(wèn)題來(lái)了,多個(gè)分論點(diǎn)或者論據(jù)谢翎,要如何組織和呈現(xiàn)呢捍靠。在金字塔原理中,介紹了三種常見(jiàn)的邏輯順序森逮,包括時(shí)間順序榨婆、重要性順序、內(nèi)在結(jié)構(gòu)順序褒侧。這次先來(lái)重點(diǎn)說(shuō)說(shuō)時(shí)間和重要性良风,在日常工作中,最能體現(xiàn)這兩個(gè)順序的就是事故復(fù)盤(pán)璃搜。在計(jì)算機(jī)領(lǐng)域拖吼,沒(méi)有出個(gè)運(yùn)維/運(yùn)營(yíng)事故的團(tuán)隊(duì)最有可能是沒(méi)有承擔(dān)責(zé)任的團(tuán)隊(duì),出了事故这吻,沒(méi)關(guān)系吊档,能復(fù)盤(pán)并不犯相同類似的錯(cuò)誤就是好團(tuán)隊(duì)的象征。

運(yùn)營(yíng)事故復(fù)盤(pán)中的時(shí)間邏輯順序

復(fù)盤(pán)的第一步唾糯,就是還原事情的真實(shí)情況怠硼,不用加工和歸納鬼贱。這時(shí),時(shí)間邏輯順序就非常重要了香璃。事故從問(wèn)題產(chǎn)生这难,擴(kuò)散,到用戶投訴或者監(jiān)控問(wèn)題開(kāi)始增加開(kāi)始葡秒,然后緊急排查定位到最終分析解決姻乓,一步步列出來(lái)。最終形成了時(shí)間線眯牧,根據(jù)時(shí)間線我們可以構(gòu)造出因果線蹋岩,幫助尋找事故背后的原因。舉個(gè)例子学少,大家可以閱讀文稿中的我們?cè)?jīng)復(fù)盤(pán)的一個(gè)案例剪个,

時(shí)間 事情
2016.7.29 15:00 開(kāi)發(fā)修復(fù)內(nèi)存泄漏問(wèn)題,把界面依賴的全局變量置空
2016.7.30 10:00 NewMonkey發(fā)現(xiàn)某界面出現(xiàn)空指針錯(cuò)誤53061
2016.7.30 15:20 X產(chǎn)品修復(fù)某界面指針缺陷53061
2016.8.1 10:00 X產(chǎn)品再次修復(fù)缺陷并產(chǎn)出1.11版本
2016.8.2 14:30 X產(chǎn)品的1.11版本依舊發(fā)現(xiàn)相同界面不同堆棧的空指針錯(cuò)誤
2016.8.2 20:00 X產(chǎn)品發(fā)布后發(fā)現(xiàn)增加5%的Crash率的Crash
2016.8.3 15:24 排查問(wèn)題并發(fā)布緊急補(bǔ)丁修復(fù)錯(cuò)誤
2016.8.4 7:00 Crash修復(fù)至0.22%

跟團(tuán)隊(duì)復(fù)盤(pán)的時(shí)候版确,必須有像上面這樣的一份還原事實(shí)的時(shí)間線扣囊,其實(shí)并不簡(jiǎn)單,要追溯缺陷系統(tǒng)绒疗,svn提交記錄侵歇,發(fā)布系統(tǒng),問(wèn)題的關(guān)聯(lián)分析忌堂,還有許多“為什么”需要跟相關(guān)干系人了解盒至, 例如補(bǔ)丁準(zhǔn)備時(shí)間為什么這么長(zhǎng),為什么7月30日10:00會(huì)改出空指針問(wèn)題士修,為什么出新的安裝包時(shí)間要相差好幾個(gè)小時(shí)枷遂。在這個(gè)追溯的過(guò)程,其實(shí)就是在找問(wèn)題出現(xiàn)的源頭棋嘲。

這里有個(gè)工具介紹給大家酒唉,幫助還原清晰的因果線,就是“5個(gè)為什么”沸移。這個(gè)方法源自豐田汽車公司的創(chuàng)始人豐田喜一郎的父親豐田佐吉痪伦,并且納入豐田內(nèi)部培訓(xùn)的課程里面。簡(jiǎn)單點(diǎn)說(shuō)就是規(guī)范化刨根問(wèn)底雹锣。其實(shí)在上面表格的那個(gè)真實(shí)案例网沾,也是這么問(wèn)出來(lái)的。

當(dāng)時(shí)蕊爵,我們有個(gè)同事布蘭特很沮喪地找到我說(shuō)辉哥,我們的隨機(jī)測(cè)試NewMonkey工具有問(wèn)題,漏出了一個(gè)被測(cè)產(chǎn)品的TOP Crash。現(xiàn)在想起來(lái)醋旦,這樣的責(zé)任心很寶貴的恒水,出問(wèn)題,測(cè)試工具來(lái)抗饲齐。但是當(dāng)時(shí)我就實(shí)驗(yàn)下一下“5個(gè)為什么”來(lái)還原事實(shí)钉凌,下面是當(dāng)時(shí)的對(duì)話。

當(dāng)時(shí)我不禁發(fā)問(wèn)捂人,“是核心功能嗎御雕?”

布蘭特答,“嗯先慷,是的艾猜。打開(kāi)聊天窗口”

我又問(wèn)夭谤,“那為什么會(huì)Crash呢?”

布蘭特翻查了一下svn修復(fù)的記錄和線上的堆棧眼刃,”因?yàn)槿肿兞康目罩羔槅?wèn)題“

我又問(wèn)摄狱,“嗯脓诡,全局變量。那為什么之前沒(méi)有Crash媒役,現(xiàn)在Crash了祝谚,是修改了哪里?”

布蘭特又查了一下幾天前的修改記錄酣衷,“天呀交惯,在同一個(gè)界面居然還修改了兩次空指針錯(cuò)誤。7月29日的時(shí)候穿仪,開(kāi)發(fā)把這個(gè)全局變量設(shè)置為空之后席爽,我們的工具就發(fā)現(xiàn)了兩次Crash,開(kāi)發(fā)做空保護(hù)啊片,修復(fù)了兩次只锻。“

我繼續(xù)好奇地問(wèn)紫谷,“淡定齐饮,現(xiàn)在問(wèn)題找到了。但是為什么開(kāi)發(fā)要把那個(gè)變量置空笤昨∽媲”

布蘭特看了下置空的SVN提交記錄中關(guān)聯(lián)的缺陷單說(shuō)到,“是我們QAPM自動(dòng)發(fā)現(xiàn)的內(nèi)存泄漏問(wèn)題瞒窒,然后開(kāi)發(fā)在反注冊(cè)之后捺僻,把關(guān)聯(lián)的全局變量置空了「停“

之后我們據(jù)此陵像,出了復(fù)盤(pán)的郵件就珠,除了幫助提升開(kāi)發(fā)意識(shí)的案例培訓(xùn)之外,也給靜態(tài)掃描等工具提出了針對(duì)性的要求醒颖。

運(yùn)營(yíng)事故復(fù)盤(pán)中的重要性邏輯順序

1.png

在復(fù)盤(pán)中妻怎,通常我們需要寫(xiě)改進(jìn)措施。但是問(wèn)題來(lái)了泞歉,對(duì)于平日忙到吐血的我們逼侦,要確保措施落地,就要思考一件事情腰耙,優(yōu)先級(jí)/重要性榛丢。所以在改進(jìn)措施的演示文稿或者表格中,就可以按照重要性/優(yōu)先級(jí)的邏輯順序來(lái)呈現(xiàn)挺庞。接著上面的例子晰赞,當(dāng)時(shí)我們的重要性排序是,靜態(tài)檢查規(guī)則掃描并修復(fù)>核心代碼更改告警>開(kāi)發(fā)案例培訓(xùn)选侨。

重要性與時(shí)間還出現(xiàn)在什么匯報(bào)中

除了事故復(fù)盤(pán)這種悲傷的事情掖鱼,跟上級(jí)匯報(bào)中計(jì)劃與進(jìn)度、產(chǎn)品Roadmap援制,通常是按照時(shí)間線來(lái)展開(kāi)戏挡。當(dāng)然這個(gè)時(shí)間線本身就蘊(yùn)含了對(duì)重要性的綜合考慮。例如文稿中的演示文稿晨仑。

2.png

NewMonkey的進(jìn)度與規(guī)劃

另外一個(gè)就是褐墅,重要性邏輯排序。為了體現(xiàn)你在解決問(wèn)題上洪己,對(duì)關(guān)鍵矛盾/問(wèn)題的識(shí)別是否到位妥凳,通常也就在解決方案的陳述中使用。例如文稿中码泛,我曾經(jīng)匯報(bào)的這頁(yè)演示文稿猾封,陳述的是面對(duì)Web性能監(jiān)控方案的需求壓力,我們?cè)鯓咏鉀Q快速補(bǔ)全功能的問(wèn)題噪珊。

3.png

解決方案晌缘,解決整合

在緊接著的演示文稿,會(huì)先詳細(xì)說(shuō)明Web性能監(jiān)控如何整合痢站。然后再說(shuō)其他監(jiān)控能力如何自研和整合配合磷箕。這個(gè)重要性順序的安排的思考在于,1. 啄木鳥(niǎo)和倫琴都是現(xiàn)成在公司內(nèi)成熟的方案阵难;2. 監(jiān)控與分析的閉環(huán)如果沒(méi)有達(dá)成岳枷,用戶使用的時(shí)候就會(huì)有發(fā)現(xiàn)問(wèn)題無(wú)法修復(fù)的困境,體驗(yàn)也沒(méi)有閉環(huán);

通過(guò)這個(gè)例子空繁,聽(tīng)眾們應(yīng)該知道時(shí)間與重要性邏輯順序的基本用法和使用的場(chǎng)景殿衰。說(shuō)真的,兩個(gè)順序難度不算最大的盛泡,只要多想闷祥,細(xì)心點(diǎn),就可以寫(xiě)出來(lái)傲诵。但是下一節(jié)凯砍,我們介紹另外一個(gè)重要的邏輯順序,內(nèi)在結(jié)構(gòu)的難度就高多了拴竹,敬請(qǐng)期待悟衩。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市栓拜,隨后出現(xiàn)的幾起案子座泳,更是在濱河造成了極大的恐慌,老刑警劉巖菱属,帶你破解...
    沈念sama閱讀 218,755評(píng)論 6 507
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件钳榨,死亡現(xiàn)場(chǎng)離奇詭異,居然都是意外死亡纽门,警方通過(guò)查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,305評(píng)論 3 395
  • 文/潘曉璐 我一進(jìn)店門(mén)营罢,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái)赏陵,“玉大人,你說(shuō)我怎么就攤上這事饲漾◎Γ” “怎么了?”我有些...
    開(kāi)封第一講書(shū)人閱讀 165,138評(píng)論 0 355
  • 文/不壞的土叔 我叫張陵考传,是天一觀的道長(zhǎng)吃型。 經(jīng)常有香客問(wèn)我,道長(zhǎng)僚楞,這世上最難降的妖魔是什么勤晚? 我笑而不...
    開(kāi)封第一講書(shū)人閱讀 58,791評(píng)論 1 295
  • 正文 為了忘掉前任,我火速辦了婚禮泉褐,結(jié)果婚禮上赐写,老公的妹妹穿的比我還像新娘。我一直安慰自己膜赃,他們只是感情好挺邀,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,794評(píng)論 6 392
  • 文/花漫 我一把揭開(kāi)白布。 她就那樣靜靜地躺著,像睡著了一般端铛。 火紅的嫁衣襯著肌膚如雪泣矛。 梳的紋絲不亂的頭發(fā)上,一...
    開(kāi)封第一講書(shū)人閱讀 51,631評(píng)論 1 305
  • 那天禾蚕,我揣著相機(jī)與錄音乳蓄,去河邊找鬼。 笑死夕膀,一個(gè)胖子當(dāng)著我的面吹牛虚倒,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播产舞,決...
    沈念sama閱讀 40,362評(píng)論 3 418
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼魂奥,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼!你這毒婦竟也來(lái)了易猫?” 一聲冷哼從身側(cè)響起耻煤,我...
    開(kāi)封第一講書(shū)人閱讀 39,264評(píng)論 0 276
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎准颓,沒(méi)想到半個(gè)月后哈蝇,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 45,724評(píng)論 1 315
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡攘已,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,900評(píng)論 3 336
  • 正文 我和宋清朗相戀三年炮赦,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片样勃。...
    茶點(diǎn)故事閱讀 40,040評(píng)論 1 350
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡吠勘,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出峡眶,到底是詐尸還是另有隱情剧防,我是刑警寧澤,帶...
    沈念sama閱讀 35,742評(píng)論 5 346
  • 正文 年R本政府宣布辫樱,位于F島的核電站峭拘,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏狮暑。R本人自食惡果不足惜鸡挠,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,364評(píng)論 3 330
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望心例。 院中可真熱鬧宵凌,春花似錦、人聲如沸止后。這莊子的主人今日做“春日...
    開(kāi)封第一講書(shū)人閱讀 31,944評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)。三九已至瓜喇,卻和暖如春挺益,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背乘寒。 一陣腳步聲響...
    開(kāi)封第一講書(shū)人閱讀 33,060評(píng)論 1 270
  • 我被黑心中介騙來(lái)泰國(guó)打工望众, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人伞辛。 一個(gè)月前我還...
    沈念sama閱讀 48,247評(píng)論 3 371
  • 正文 我出身青樓烂翰,卻偏偏與公主長(zhǎng)得像,于是被迫代替她去往敵國(guó)和親蚤氏。 傳聞我的和親對(duì)象是個(gè)殘疾皇子甘耿,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,979評(píng)論 2 355

推薦閱讀更多精彩內(nèi)容

  • 作為一個(gè)南方人,本人真的很少看過(guò)雪竿滨,一只手都可以數(shù)過(guò)來(lái)佳恬。偏偏我有三個(gè)人北方的舍友,每天跟我細(xì)說(shuō)北方的雪啊于游。北方的有...
    小十巷閱讀 110評(píng)論 0 1
  • 自由寫(xiě)作30天.轉(zhuǎn)型與蛻變第二期第14篇 這幾日溫度飆升到了二十八九度毁葱,躺在一棵盛開(kāi)的花樹(shù)下,偶有風(fēng)過(guò)贰剥,不冷也不熱...
    真言臻宇閱讀 425評(píng)論 3 3
  • 如果一個(gè)類沒(méi)有實(shí)現(xiàn)自己的init方法倾剿,Cocoa會(huì)調(diào)用它父類的init方法來(lái)給它初始化。沒(méi)啥必須的理由鸠澈,就是個(gè)約定...
    Stroman閱讀 164評(píng)論 0 0
  • 其實(shí),據(jù)專家統(tǒng)計(jì)坡锡,兒童說(shuō)謊話67%是由于畏懼和怕嘲笑引起的蓬网,10%與兒童的想象、夸張有關(guān)鹉勒,只有20%的孩子是...
    李爾蓋茨閱讀 448評(píng)論 1 2
  • 陽(yáng)光校園帆锋,我們?cè)诔砷L(zhǎng) 校園生活,五彩斑斕,似一幅畫(huà)冊(cè)禽额,記錄著我們成長(zhǎng)的故事锯厢,如一臺(tái)攝影機(jī)皮官,拍下了我們的每一段歡樂(lè)。...
    一支愛(ài)寫(xiě)字的鉛筆閱讀 244評(píng)論 0 0