秒殺系統(tǒng)設(shè)計

業(yè)務(wù)介紹

什么是秒殺豺憔?通俗一點講就是網(wǎng)絡(luò)商家為促銷等目的組織的網(wǎng)上限時搶購活動伦糯。

比如說京東秒殺,就是一種定時定量秒殺靠娱,在規(guī)定的時間內(nèi)沧烈,無論商品是否秒殺完畢,該場次的秒殺活動都會結(jié)束像云。這種秒殺锌雀,對時間不是特別嚴格,只要下手快點苫费,秒中的概率還是比較大的汤锨。

淘寶以前就做過一元搶購,一般都是限量 1 件商品百框,同時價格低到「令人發(fā)齒」闲礼,這種秒殺一般都在開始時間 1 到 3 秒內(nèi)就已經(jīng)搶光了,參與這個秒殺一般都是看運氣的铐维,不必太強求柬泽。

業(yè)務(wù)特點

  • 瞬時并發(fā)量大
    秒殺時會有大量用戶在同一時間進行搶購,瞬時并發(fā)訪問量突增 10 倍嫁蛇,甚至 100 倍以上都有锨并。

  • 庫存量少
    一般秒殺活動商品量很少,這就導(dǎo)致了只有極少量用戶能成功購買到睬棚。

  • 業(yè)務(wù)簡單
    流程比較簡單第煮,一般都是下訂單解幼、扣庫存、支付訂單包警。

技術(shù)難點

  • 現(xiàn)有業(yè)務(wù)的沖擊
    秒殺是營銷活動中的一種撵摆,如果和其他營銷活動應(yīng)用部署在同一服務(wù)器上,肯定會對現(xiàn)有其他活動造成沖擊害晦,極端情況下可能導(dǎo)致整個電商系統(tǒng)服務(wù)宕機特铝。

  • 直接下訂單
    下單頁面是一個正常的 URL 地址,需要控制在秒殺開始前壹瘟,不能下訂單鲫剿,只能瀏覽對應(yīng)活動商品的信息。簡單來說稻轨,需要 Disable 訂單按鈕灵莲。

  • 頁面流量突增
    秒殺活動開始前后,會有很多用戶請求對應(yīng)商品頁面澄者,會造成后臺服務(wù)器的流量突增笆呆,同時對應(yīng)的網(wǎng)絡(luò)帶寬增加,需要控制商品頁面的流量不會對后臺服務(wù)器粱挡、DB赠幕、Redis 等組件的造成過大的壓力。

架構(gòu)設(shè)計思想

  • 限流
    由于活動庫存量一般都是很少询筏,對應(yīng)的只有少部分用戶才能秒殺成功榕堰。所以我們需要限制大部分用戶流量,只準少量用戶流量進入后端服務(wù)器嫌套。

  • 削峰
    秒殺開始的那一瞬間逆屡,會有大量用戶沖擊進來,所以在開始時候會有一個瞬間流量峰值踱讨。如何把瞬間的流量峰值變得更平緩魏蔗,是能否成功設(shè)計好秒殺系統(tǒng)的關(guān)鍵因素。實現(xiàn)流量削峰填谷痹筛,一般的采用緩存和 MQ 中間件來解決莺治。

  • 異步
    秒殺其實可以當(dāng)做高并發(fā)系統(tǒng)來處理,在這個時候帚稠,可以考慮從業(yè)務(wù)上做兼容谣旁,將同步的業(yè)務(wù),設(shè)計成異步處理的任務(wù)滋早,提高網(wǎng)站的整體可用性榄审。

  • 緩存
    秒殺系統(tǒng)的瓶頸主要體現(xiàn)在下訂單、扣減庫存流程中杆麸。在這些流程中主要用到 OLTP 的數(shù)據(jù)庫搁进,類似 MySQL浪感、SQLServer、Oracle饼问。由于數(shù)據(jù)庫底層采用 B+ 樹的儲存結(jié)構(gòu)篮撑,對應(yīng)我們隨機寫入與讀取的效率,相對較低匆瓜。如果我們把部分業(yè)務(wù)邏輯遷移到內(nèi)存的緩存或者 Redis 中,會極大的提高并發(fā)效率未蝌。

整體架構(gòu)

客戶端優(yōu)化

客戶端優(yōu)化主要有兩個問題:

  • 秒殺頁面
    秒殺活動開始前驮吱,其實就有很多用戶訪問該頁面了。如果這個頁面的一些資源萧吠,比如 CSS左冬、JS、圖片纸型、商品詳情等拇砰,都訪問后端服務(wù)器,甚至 DB 的話狰腌,服務(wù)肯定會出現(xiàn)不可用的情況除破。所以一般我們會把這個頁面整體進行靜態(tài)化,并將頁面靜態(tài)化之后的頁面分發(fā)到 CDN 邊緣節(jié)點上琼腔,起到壓力分散的作用瑰枫。

  • 防止提前下單
    防止提前下單主要是在靜態(tài)化頁面中加入一個 JS 文件引用,該 JS 文件包含活動是否開始的標記以及開始時的動態(tài)下單頁面的 URL 參數(shù)丹莲。同時光坝,這個 JS 文件是不會被 CDN 系統(tǒng)緩存的,會一直請求后端服務(wù)的甥材,所以這個 JS 文件一定要很小盯另。當(dāng)活動快開始的時候(比如提前),通過后臺接口修改這個 JS 文件使之生效洲赵。

API 接入層優(yōu)化

客戶端優(yōu)化鸳惯,對于不是搞計算機方面的用戶還是可以防止住的。但是稍有一定網(wǎng)絡(luò)基礎(chǔ)的用戶就起不到作用了板鬓,因此服務(wù)端也需要加些對應(yīng)控制悲敷,不能信任客戶端的任何操作。一般控制分為 2 大類:

  • 限制用戶維度訪問頻率
    針對同一個用戶( Userid 維度)俭令,做頁面級別緩存后德,單元時間內(nèi)的請求,統(tǒng)一走緩存抄腔,返回同一個頁面瓢湃。

  • 限制商品維度訪問頻率
    大量請求同時間段查詢同一個商品時理张,可以做頁面級別緩存,不管下回是誰來訪問绵患,只要是這個頁面就直接返回雾叭。

SOA 服務(wù)層優(yōu)化

上面兩層只能限制異常用戶訪問,如果秒殺活動運營的比較好落蝙,很多用戶都參加了织狐,就會造成系統(tǒng)壓力過大甚至宕機,因此需要后端流量控制筏勒。

對于后端系統(tǒng)的控制可以通過消息隊列移迫、異步處理、提高并發(fā)等方式解決管行。對于超過系統(tǒng)水位線的請求厨埋,直接采取 「Fail-Fast」原則,拒絕掉捐顷。

秒殺整體流程圖

秒殺系統(tǒng)核心在于層層過濾荡陷,逐漸遞減瞬時訪問壓力,減少最終對數(shù)據(jù)庫的沖擊迅涮。通過上面流程圖就會發(fā)現(xiàn)壓力最大的地方在哪里废赞?

MQ 排隊服務(wù),只要 MQ 排隊服務(wù)頂住叮姑,后面下訂單與扣減庫存的壓力都是自己能控制的蛹头,根據(jù)數(shù)據(jù)庫的壓力,可以定制化創(chuàng)建訂單消費者的數(shù)量戏溺,避免出現(xiàn)消費者數(shù)據(jù)量過多渣蜗,導(dǎo)致數(shù)據(jù)庫壓力過大或者直接宕機。

庫存服務(wù)專門為秒殺的商品提供庫存管理旷祸,實現(xiàn)提前鎖定庫存耕拷,避免超賣的現(xiàn)象。同時托享,通過超時處理任務(wù)發(fā)現(xiàn)已搶到商品骚烧,但未付款的訂單,并在規(guī)定付款時間后闰围,處理這些訂單赃绊,將恢復(fù)訂單商品對應(yīng)的庫存量。

緩存層優(yōu)化

  • 防止緩存雪崩羡榴、穿透碧查、擊穿

減少緩存滲透:可以在服務(wù)中進行布隆過濾,可以將不存在的商品或券訪問在服務(wù)端過濾掉;或者對緩存中沒有的數(shù)據(jù)key置為null并設(shè)置較短的過期時間忠售,優(yōu)點是簡單易操作传惠,缺點要增加大量的null key,增大了與mysql的不一致性稻扬,需要消息機制和mysql保持同步卦方。

防止緩存雪崩:設(shè)置key的過期時間時,采用固定時間+隨機時間的方法泰佳,可以有效防止緩存同時過期引起雪崩的問題盼砍。

防止緩存擊穿:增加二級緩存: A1為原始緩存,A2為拷貝緩存逝她,A1失效時衬廷,可以訪問A2,A1緩存失效時間設(shè)置為短期汽绢,A2設(shè)置為長期。

  • 限流:對key的操作加鎖排隊(利用setnx進行分布式鎖)侧戴,即同時只允許一個線程訪問宁昭。
  • 避免數(shù)據(jù)傾斜:利用一致性hash算法,合理設(shè)置redis中的key酗宋,使其均勻的分布到各個節(jié)點积仗,防止大量請求訪問到少量節(jié)點的熱點問題,而且可以減少單個節(jié)點宕機造成的影響蜕猫。

總結(jié)

核心思想:層層過濾
盡量將請求攔截在上游寂曹,降低下游的壓力
充分利用緩存與消息隊列,提高請求處理速度以及削峰填谷的作用

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末回右,一起剝皮案震驚了整個濱河市隆圆,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌翔烁,老刑警劉巖渺氧,帶你破解...
    沈念sama閱讀 218,546評論 6 507
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異蹬屹,居然都是意外死亡侣背,警方通過查閱死者的電腦和手機,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,224評論 3 395
  • 文/潘曉璐 我一進店門慨默,熙熙樓的掌柜王于貴愁眉苦臉地迎上來贩耐,“玉大人,你說我怎么就攤上這事厦取〕碧” “怎么了?”我有些...
    開封第一講書人閱讀 164,911評論 0 354
  • 文/不壞的土叔 我叫張陵虾攻,是天一觀的道長消别。 經(jīng)常有香客問我抛蚤,道長,這世上最難降的妖魔是什么寻狂? 我笑而不...
    開封第一講書人閱讀 58,737評論 1 294
  • 正文 為了忘掉前任岁经,我火速辦了婚禮,結(jié)果婚禮上蛇券,老公的妹妹穿的比我還像新娘缀壤。我一直安慰自己,他們只是感情好纠亚,可當(dāng)我...
    茶點故事閱讀 67,753評論 6 392
  • 文/花漫 我一把揭開白布塘慕。 她就那樣靜靜地躺著,像睡著了一般蒂胞。 火紅的嫁衣襯著肌膚如雪图呢。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 51,598評論 1 305
  • 那天骗随,我揣著相機與錄音蛤织,去河邊找鬼。 笑死鸿染,一個胖子當(dāng)著我的面吹牛指蚜,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播涨椒,決...
    沈念sama閱讀 40,338評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼摊鸡,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了蚕冬?” 一聲冷哼從身側(cè)響起免猾,我...
    開封第一講書人閱讀 39,249評論 0 276
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎囤热,沒想到半個月后掸刊,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 45,696評論 1 314
  • 正文 獨居荒郊野嶺守林人離奇死亡赢乓,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 37,888評論 3 336
  • 正文 我和宋清朗相戀三年忧侧,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片牌芋。...
    茶點故事閱讀 40,013評論 1 348
  • 序言:一個原本活蹦亂跳的男人離奇死亡蚓炬,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出躺屁,到底是詐尸還是另有隱情肯夏,我是刑警寧澤,帶...
    沈念sama閱讀 35,731評論 5 346
  • 正文 年R本政府宣布,位于F島的核電站驯击,受9級特大地震影響烁兰,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜徊都,卻給世界環(huán)境...
    茶點故事閱讀 41,348評論 3 330
  • 文/蒙蒙 一沪斟、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧暇矫,春花似錦主之、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,929評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至房轿,卻和暖如春粤攒,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背囱持。 一陣腳步聲響...
    開封第一講書人閱讀 33,048評論 1 270
  • 我被黑心中介騙來泰國打工夯接, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人洪唐。 一個月前我還...
    沈念sama閱讀 48,203評論 3 370
  • 正文 我出身青樓,卻偏偏與公主長得像吼蚁,于是被迫代替她去往敵國和親凭需。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 44,960評論 2 355

推薦閱讀更多精彩內(nèi)容

  • 什么是秒殺 通俗一點講就是網(wǎng)絡(luò)商家為促銷等目的組織的網(wǎng)上限時搶購活動 比如說京東秒殺肝匆,就是一種定時定量秒殺粒蜈,在規(guī)定...
    zwb_jianshu閱讀 665評論 0 1
  • 什么是秒殺 通俗一點講就是網(wǎng)絡(luò)商家為促銷等目的組織的網(wǎng)上限時搶購活動 比如說京東秒殺,就是一種定時定量秒殺旗国,在規(guī)定...
    zwb_jianshu閱讀 554評論 0 0
  • 什么是秒殺 通俗一點講就是網(wǎng)絡(luò)商家為促銷等目的組織的網(wǎng)上限時搶購活動 比如說京東秒殺枯怖,就是一種定時定量秒殺,在規(guī)定...
    碼道功臣閱讀 6,035評論 2 79
  • 一小時學(xué)會寫頁面 作為一個懶癌晚期患者能曾,總是習(xí)慣找各種簡單的解決問題的方法度硝,也習(xí)慣性把問題簡單化,所以今天想分享給...
    默默前端路閱讀 1,632評論 9 39
  • 我真心希望我過上自己的生活 或許有愛人在身邊 或許我在我愛的人身邊 他有著難過的過往 滿心思都是珍惜我 他的家人也...
    養(yǎng)只刺猬閱讀 307評論 0 0