如何看待 k8s 的 HPA

? 最近被問到如何理解 k8s 彈性伸縮的這樣的問題库倘,而我最初的回答很簡單也很膚淺,我說:k8s 是 HPA 根據(jù)定義的 metric 閾值 (簡單的 cpu 值或者用戶自定義)來對應(yīng)用進行擴縮容的毡咏。

   今天和微博的朋友也聊到了這個話題,他說在他們的場景下 k8s 的彈性擴容是不起作用的务冕,因為在某些熱點新聞的高流量下2分鐘內(nèi)就需要擴容上千臺機器血当,k8s 默認的彈性擴容是解決不了這個問題的 (因為默認的調(diào)度機制是串行的,需要做 hack 才可以)禀忆。 
  這讓我意識到我想簡單了,其實脫離了場景討論技術(shù)都是不靠譜的落恼。

  讓我們回到這個問題的原點 “彈性伸縮”箩退, 那先看看它是如何定義的,

Elastic scaling is the ability to automatically add or remove compute or networking infrastructure based on changing application traffic patterns.

彈性伸縮是一種系統(tǒng)能力佳谦,它可以根據(jù)應(yīng)用的流量變化自動的增加或者刪減資源戴涝。
說到這里,腦海里會出現(xiàn)幾個問題:

  1. 這里面的一個關(guān)鍵詞是“自動的”钻蔑,那如何實現(xiàn)自動呢啥刻?
    根據(jù) cpu 可以嗎?這個就區(qū)分場景了咪笑,絕大多少的線上應(yīng)用不會簡單的依賴 cpu 指標來衡量是否需要擴容可帽,因為這是一個非常復(fù)雜的決策過程,
  1. 彈性伸縮這種能力哪種場景需要窗怒?我們的場景需要嗎映跟?
    根據(jù)定義,只有流量會有突增的場景才會有這個需求扬虚,比如幾年前微博的例子努隙,經(jīng)常幾個明顯緋聞就把系統(tǒng)搞掛了。但這種場景畢竟是很少的辜昵, 而我們自己公司內(nèi)部是用不到的荸镊。而對應(yīng)微博來說,這個功能還比較雞肋,因為它擴容的太慢了躬存,而且如何判斷更是個大難題收厨,超出了 k8s 的管理范疇。
 聽完微博朋友介紹了他們的場景优构,想到了之前螞蟻的人介紹他們的雙十一架構(gòu)诵叁,可以很短的時間擴容幾千個機器,怎么做到的呢钦椭? 把 k8s 默認的調(diào)度算法從原來的順序的調(diào)度改為了批量的調(diào)度拧额,滿足了這個大促的場景。

   另外最重要的一點是如何判斷觸發(fā)擴容縮容的時機彪腔,今天從網(wǎng)上的一個 2015 年的論文里找到了一個方法論侥锦,介紹了如何用工業(yè)界的 質(zhì)量控制圖 和 區(qū)間法則找出了異常的數(shù)據(jù)波段,并進行擴容或縮容德挣。大體上微博的做法也和這個類似恭垦,因此了解下這個論文還是很有幫助的。


 總之格嗅,k8s HPA 的這個功能只能處理非常簡單的場景番挺,距離真正線上應(yīng)用使用還很遙遠,而且這個功能和 k8s 平臺關(guān)系不大屯掖,應(yīng)該在非 k8s 環(huán)境下就要能夠做到甄別出應(yīng)用的異常流量玄柏。

反思:技術(shù)問題一定要優(yōu)先考慮使用場景,使用場景

論文地址:https://www.sciencedirect.com/science/article/pii/S1877050915030239

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末贴铜,一起剝皮案震驚了整個濱河市粪摘,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌绍坝,老刑警劉巖徘意,帶你破解...
    沈念sama閱讀 207,113評論 6 481
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異轩褐,居然都是意外死亡椎咧,警方通過查閱死者的電腦和手機,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,644評論 2 381
  • 文/潘曉璐 我一進店門灾挨,熙熙樓的掌柜王于貴愁眉苦臉地迎上來邑退,“玉大人,你說我怎么就攤上這事劳澄〉丶迹” “怎么了?”我有些...
    開封第一講書人閱讀 153,340評論 0 344
  • 文/不壞的土叔 我叫張陵秒拔,是天一觀的道長莫矗。 經(jīng)常有香客問我,道長,這世上最難降的妖魔是什么作谚? 我笑而不...
    開封第一講書人閱讀 55,449評論 1 279
  • 正文 為了忘掉前任三娩,我火速辦了婚禮,結(jié)果婚禮上妹懒,老公的妹妹穿的比我還像新娘雀监。我一直安慰自己,他們只是感情好眨唬,可當我...
    茶點故事閱讀 64,445評論 5 374
  • 文/花漫 我一把揭開白布会前。 她就那樣靜靜地躺著,像睡著了一般匾竿。 火紅的嫁衣襯著肌膚如雪瓦宜。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 49,166評論 1 284
  • 那天岭妖,我揣著相機與錄音临庇,去河邊找鬼。 笑死昵慌,一個胖子當著我的面吹牛假夺,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播废离,決...
    沈念sama閱讀 38,442評論 3 401
  • 文/蒼蘭香墨 我猛地睜開眼侄泽,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了蜻韭?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 37,105評論 0 261
  • 序言:老撾萬榮一對情侶失蹤柿扣,失蹤者是張志新(化名)和其女友劉穎肖方,沒想到半個月后,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體未状,經(jīng)...
    沈念sama閱讀 43,601評論 1 300
  • 正文 獨居荒郊野嶺守林人離奇死亡俯画,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 36,066評論 2 325
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了司草。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片艰垂。...
    茶點故事閱讀 38,161評論 1 334
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖埋虹,靈堂內(nèi)的尸體忽然破棺而出猜憎,到底是詐尸還是另有隱情,我是刑警寧澤搔课,帶...
    沈念sama閱讀 33,792評論 4 323
  • 正文 年R本政府宣布胰柑,位于F島的核電站,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏柬讨。R本人自食惡果不足惜崩瓤,卻給世界環(huán)境...
    茶點故事閱讀 39,351評論 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望踩官。 院中可真熱鬧却桶,春花似錦、人聲如沸蔗牡。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,352評論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽蛋逾。三九已至集晚,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間区匣,已是汗流浹背偷拔。 一陣腳步聲響...
    開封第一講書人閱讀 31,584評論 1 261
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留亏钩,地道東北人莲绰。 一個月前我還...
    沈念sama閱讀 45,618評論 2 355
  • 正文 我出身青樓,卻偏偏與公主長得像姑丑,于是被迫代替她去往敵國和親蛤签。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 42,916評論 2 344

推薦閱讀更多精彩內(nèi)容