SRE技術(shù)保障——堅(jiān)持前行(二)

技術(shù)保障團(tuán)隊(duì)——踐行SRE

SRE(Site Reliability Engineer)骏啰,Google從創(chuàng)業(yè)之初就有這個(gè)職位并逐步沉淀出一套SRE理念,近兩年國(guó)內(nèi)互聯(lián)網(wǎng)企業(yè)也紛紛引入残邀。

SRE團(tuán)隊(duì)對(duì)云產(chǎn)品穩(wěn)定性最終責(zé)任,運(yùn)用全棧技術(shù)能力柑蛇,從技術(shù)規(guī)范-監(jiān)控體系-風(fēng)險(xiǎn)管理-自動(dòng)化工具多角度入手芥挣,持續(xù)提升產(chǎn)品的穩(wěn)定性及性能。


那么耻台,雅座是否需要SRE空免?答案是肯定的

我們走過12年的歷程,從最早的會(huì)員1.0->2.0->3.0盆耽,到雅座智能1.0->雅座收銀2.0蹋砚。產(chǎn)品越來越強(qiáng)大、并覆蓋餐廳運(yùn)營(yíng)全周期的同時(shí)摄杂,餐廳對(duì)產(chǎn)品穩(wěn)定性的要求也越來越高坝咐。最開始,故障影響的只是報(bào)表析恢,后來故障影響客戶會(huì)員積分交易墨坚,到現(xiàn)在,一個(gè)小小的故障都會(huì)影響客戶點(diǎn)餐映挂、后廚打印框杜、外賣接單,直接導(dǎo)致餐廳徹底癱瘓袖肥。很難想象出哪家互聯(lián)網(wǎng)企業(yè)咪辱,會(huì)比我們更需要SRE。

技術(shù)保障部成立

7月椎组,運(yùn)維團(tuán)隊(duì)被重新命名為【技術(shù)保障部】油狂,這是對(duì)團(tuán)隊(duì)的重新定位,對(duì)未來團(tuán)隊(duì)價(jià)值的展望寸癌。

使命:

打造產(chǎn)品穩(wěn)定性的強(qiáng)力保障體系专筷,確保穩(wěn)定性成為公司產(chǎn)品的核心競(jìng)爭(zhēng)力之一。

職責(zé):

1蒸苇、運(yùn)維及自動(dòng)化磷蛹;

2、建立穩(wěn)定性/性能相關(guān)的技術(shù)保障體系:風(fēng)險(xiǎn)管理-技術(shù)規(guī)范-監(jiān)控-自動(dòng)化工具溪烤;

3味咳、數(shù)據(jù)安全保障庇勃;

18年的目標(biāo):

1、初步建立公司層面的SRE保障體系槽驶,并切實(shí)有效责嚷,使收銀2.0新產(chǎn)品線事故數(shù)比1.0下降80%。

2掂铐、運(yùn)維自動(dòng)化能力建設(shè)罕拂,運(yùn)維及自動(dòng)化團(tuán)隊(duì)控制在8人以下,高效管理5000臺(tái)服務(wù)器全陨、支撐5W家門店爆班。

3、在無(wú)錫培養(yǎng)一支團(tuán)隊(duì)辱姨,能夠獨(dú)立承擔(dān)運(yùn)維自動(dòng)化柿菩、SRE大部分工作。


6-7月我們的成果

技術(shù)規(guī)范

《需求評(píng)審規(guī)范1.0》炮叶、《代碼報(bào)錯(cuò)及執(zhí)行超時(shí)規(guī)范1.0》碗旅、《上線流程規(guī)范1.0》渡处,不但規(guī)范成型镜悉,還跟進(jìn)了監(jiān)控、統(tǒng)計(jì)日?qǐng)?bào)等技術(shù)手段医瘫,確保規(guī)范能夠真正落地侣肄。

我們的職責(zé)是讓這些規(guī)范在未來持續(xù)完善、補(bǔ)充和持續(xù)落地醇份,相信能夠成為技術(shù)團(tuán)隊(duì)的一筆寶貴財(cái)富稼锅。

風(fēng)險(xiǎn)管理

1、每周一次的風(fēng)險(xiǎn)梳理僚纷、排期矩距、升級(jí)流程,持續(xù)運(yùn)作怖竭。

2锥债、重點(diǎn)推進(jìn)解決了【大白鯊依賴小雅CRM】、【Api層授權(quán)補(bǔ)充】痊臭、【運(yùn)維操作規(guī)范執(zhí)行難】幾個(gè)重點(diǎn)風(fēng)險(xiǎn)哮肚。

灰度環(huán)境2.0

1、業(yè)務(wù)團(tuán)隊(duì)可任選商戶广匙,10分鐘內(nèi)完成生產(chǎn)<->灰度的流量切換允趟,用真實(shí)客戶流量試點(diǎn)新版本代碼。

2鸦致、高度仿真生產(chǎn)環(huán)境潮剪,共享一套網(wǎng)關(guān)涣楷、數(shù)據(jù)庫(kù)、緩存鲁纠、MQ总棵、配置文件,并有效隔離改含。

3情龄、從代碼框架、代碼規(guī)范捍壤、網(wǎng)關(guān)二次開發(fā)等多維度入手骤视,全面支持收銀2.0從點(diǎn)餐-下單-POS出單-支付-BOH的整個(gè)營(yíng)業(yè)場(chǎng)景,涉及60多個(gè)應(yīng)用程序鹃觉,研發(fā)只需極少量代碼改動(dòng)专酗。

4、原定8.17日上線盗扇,因業(yè)務(wù)要求提前到8.1祷肯,調(diào)集資源,客服各種技術(shù)難題/疑難BUG疗隶,如期上線并完成試點(diǎn)佑笋。

5、大部分工作由無(wú)錫團(tuán)隊(duì)承擔(dān)斑鼻,不論是代碼框架編寫蒋纬、Nginx二次開發(fā)、外部資源協(xié)調(diào)坚弱。

運(yùn)維平臺(tái)

一鍵完成App遷移蜀备、簡(jiǎn)單擴(kuò)容。

研發(fā)人員可自助完成緩存荒叶、MQ消息的查詢碾阁。

配置中心正式上線,具備推廣條件些楣。

未來

下半年還有5個(gè)月脂凶,性能提升、代碼規(guī)范推進(jìn)戈毒、監(jiān)控系統(tǒng)深入艰猬、灰度環(huán)境2.1、服務(wù)器集群管理埋市、一鍵擴(kuò)容等等冠桃,都給我們帶來全新的挑戰(zhàn)。

SRE團(tuán)隊(duì)的每一位伙伴道宅,不論你過去擅長(zhǎng)編碼食听、數(shù)據(jù)庫(kù)胸蛛、網(wǎng)絡(luò)、運(yùn)維樱报,需要我們一起加油葬项!

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市迹蛤,隨后出現(xiàn)的幾起案子民珍,更是在濱河造成了極大的恐慌,老刑警劉巖盗飒,帶你破解...
    沈念sama閱讀 217,509評(píng)論 6 504
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件嚷量,死亡現(xiàn)場(chǎng)離奇詭異,居然都是意外死亡逆趣,警方通過查閱死者的電腦和手機(jī)蝶溶,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,806評(píng)論 3 394
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來宣渗,“玉大人抖所,你說我怎么就攤上這事『鄞眩” “怎么了田轧?”我有些...
    開封第一講書人閱讀 163,875評(píng)論 0 354
  • 文/不壞的土叔 我叫張陵,是天一觀的道長(zhǎng)咐蝇。 經(jīng)常有香客問我涯鲁,道長(zhǎng)巷查,這世上最難降的妖魔是什么有序? 我笑而不...
    開封第一講書人閱讀 58,441評(píng)論 1 293
  • 正文 為了忘掉前任,我火速辦了婚禮岛请,結(jié)果婚禮上旭寿,老公的妹妹穿的比我還像新娘。我一直安慰自己崇败,他們只是感情好盅称,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,488評(píng)論 6 392
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著后室,像睡著了一般缩膝。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上岸霹,一...
    開封第一講書人閱讀 51,365評(píng)論 1 302
  • 那天疾层,我揣著相機(jī)與錄音,去河邊找鬼贡避。 笑死痛黎,一個(gè)胖子當(dāng)著我的面吹牛予弧,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播湖饱,決...
    沈念sama閱讀 40,190評(píng)論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼掖蛤,長(zhǎng)吁一口氣:“原來是場(chǎng)噩夢(mèng)啊……” “哼!你這毒婦竟也來了井厌?” 一聲冷哼從身側(cè)響起蚓庭,我...
    開封第一講書人閱讀 39,062評(píng)論 0 276
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎仅仆,沒想到半個(gè)月后彪置,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 45,500評(píng)論 1 314
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,706評(píng)論 3 335
  • 正文 我和宋清朗相戀三年竖共,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了疾瓮。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 39,834評(píng)論 1 347
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡潘懊,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出贿衍,到底是詐尸還是另有隱情授舟,我是刑警寧澤,帶...
    沈念sama閱讀 35,559評(píng)論 5 345
  • 正文 年R本政府宣布贸辈,位于F島的核電站释树,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏擎淤。R本人自食惡果不足惜奢啥,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,167評(píng)論 3 328
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望嘴拢。 院中可真熱鬧桩盲,春花似錦、人聲如沸席吴。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,779評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)孝冒。三九已至柬姚,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間庄涡,已是汗流浹背量承。 一陣腳步聲響...
    開封第一講書人閱讀 32,912評(píng)論 1 269
  • 我被黑心中介騙來泰國(guó)打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人宴合。 一個(gè)月前我還...
    沈念sama閱讀 47,958評(píng)論 2 370
  • 正文 我出身青樓焕梅,卻偏偏與公主長(zhǎng)得像,于是被迫代替她去往敵國(guó)和親卦洽。 傳聞我的和親對(duì)象是個(gè)殘疾皇子贞言,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,779評(píng)論 2 354

推薦閱讀更多精彩內(nèi)容

  • 專業(yè)考題類型管理運(yùn)行工作負(fù)責(zé)人一般作業(yè)考題內(nèi)容選項(xiàng)A選項(xiàng)B選項(xiàng)C選項(xiàng)D選項(xiàng)E選項(xiàng)F正確答案 變電單選GYSZ本規(guī)程...
    小白兔去釣魚閱讀 8,988評(píng)論 0 13
  • 青春的懵懂该窗,就算幼稚又如何。 文|大黃 01 男孩和女孩認(rèn)識(shí)是在高三蚤霞,那是一個(gè)剛剛好的年紀(jì)酗失, 沒有心計(jì),沒有煩惱昧绣,...
    Lavande_1閱讀 1,029評(píng)論 0 4
  • 1《虛度》 白駒過隙撒軒窗规肴,雅室參禪幽蘭香。 新篁清瘦獨(dú)歌舞夜畴,虛度時(shí)光壺底藏拖刃。 2《花園夏日》 晴空萬(wàn)里煦日熏,天...
    城市的牧馬人閱讀 755評(píng)論 1 2