阿里技術(shù)面試題—一致性hash算法

一致性哈希算法應(yīng)用領(lǐng)域

分布式數(shù)據(jù)存儲(chǔ)

均衡的分配存儲(chǔ)數(shù)據(jù)

        緩存
        Hadoop(大數(shù)據(jù))
        搜索引擎(尤其是分布式筹吐,例如ES)
        數(shù)據(jù)庫(kù)(分布式數(shù)據(jù)庫(kù)-分庫(kù)分表)
版本1.png
版本2.png

用戶量繼續(xù)增大

引出新的問題:高并發(fā),海量數(shù)據(jù)

rides (7-8W/s并發(fā)讀-3W/s并發(fā)寫)达罗、memcache 10W/s并發(fā)量
比如并發(fā)量20W左右
高并發(fā)必定集群,一臺(tái)服務(wù)器撐不住并發(fā)量的時(shí)候致板,需要增設(shè)新的服務(wù)器,組成集群,并通過負(fù)載均衡協(xié)調(diào)組件協(xié)調(diào)

方法一: hash求余侠碧、緩存集群節(jié)點(diǎn)數(shù)
弊端: 如果隨著業(yè)務(wù)增長(zhǎng),增加了新的服務(wù)器缠黍,提升集群的并發(fā)處理能力弄兜,但通過求余算法,會(huì)導(dǎo)致數(shù)據(jù)找不到瓷式,由此替饿,如果問題出現(xiàn)在緩存服務(wù)器上,大量數(shù)據(jù)無法在緩存中找到贸典,就會(huì)到DB中訪問视卢,大量數(shù)據(jù)同時(shí)訪問DB導(dǎo)致緩存雪崩

d.png

hashMap中也是hash求余
基數(shù)發(fā)生變化的算法都不靠譜
集群就是隨便加隨便減,但這種求余等類似算法會(huì)導(dǎo)致工作增加等等系列問題廊驼,被坑死的感覺


方法二 : 一致性hash算法


一致性哈希算法思想.png

風(fēng)險(xiǎn)均攤据过,同時(shí)避免緩存雪崩,同時(shí)引入虛擬節(jié)點(diǎn)連接物理機(jī)器分配數(shù)據(jù)存儲(chǔ)地址妒挎,保障新增服務(wù)器后數(shù)據(jù)處理壓力均攤蝶俱。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市饥漫,隨后出現(xiàn)的幾起案子榨呆,更是在濱河造成了極大的恐慌,老刑警劉巖庸队,帶你破解...
    沈念sama閱讀 216,651評(píng)論 6 501
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件积蜻,死亡現(xiàn)場(chǎng)離奇詭異,居然都是意外死亡彻消,警方通過查閱死者的電腦和手機(jī)竿拆,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,468評(píng)論 3 392
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來宾尚,“玉大人丙笋,你說我怎么就攤上這事』吞” “怎么了御板?”我有些...
    開封第一講書人閱讀 162,931評(píng)論 0 353
  • 文/不壞的土叔 我叫張陵,是天一觀的道長(zhǎng)牛郑。 經(jīng)常有香客問我怠肋,道長(zhǎng),這世上最難降的妖魔是什么淹朋? 我笑而不...
    開封第一講書人閱讀 58,218評(píng)論 1 292
  • 正文 為了忘掉前任笙各,我火速辦了婚禮钉答,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘杈抢。我一直安慰自己数尿,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,234評(píng)論 6 388
  • 文/花漫 我一把揭開白布惶楼。 她就那樣靜靜地躺著砌创,像睡著了一般。 火紅的嫁衣襯著肌膚如雪鲫懒。 梳的紋絲不亂的頭發(fā)上嫩实,一...
    開封第一講書人閱讀 51,198評(píng)論 1 299
  • 那天,我揣著相機(jī)與錄音窥岩,去河邊找鬼甲献。 笑死,一個(gè)胖子當(dāng)著我的面吹牛颂翼,可吹牛的內(nèi)容都是我干的晃洒。 我是一名探鬼主播,決...
    沈念sama閱讀 40,084評(píng)論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼朦乏,長(zhǎng)吁一口氣:“原來是場(chǎng)噩夢(mèng)啊……” “哼球及!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起呻疹,我...
    開封第一講書人閱讀 38,926評(píng)論 0 274
  • 序言:老撾萬榮一對(duì)情侶失蹤吃引,失蹤者是張志新(化名)和其女友劉穎,沒想到半個(gè)月后刽锤,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體镊尺,經(jīng)...
    沈念sama閱讀 45,341評(píng)論 1 311
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,563評(píng)論 2 333
  • 正文 我和宋清朗相戀三年并思,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了庐氮。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 39,731評(píng)論 1 348
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡宋彼,死狀恐怖弄砍,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情输涕,我是刑警寧澤音婶,帶...
    沈念sama閱讀 35,430評(píng)論 5 343
  • 正文 年R本政府宣布,位于F島的核電站占贫,受9級(jí)特大地震影響桃熄,放射性物質(zhì)發(fā)生泄漏先口。R本人自食惡果不足惜型奥,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,036評(píng)論 3 326
  • 文/蒙蒙 一瞳收、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧厢汹,春花似錦螟深、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,676評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至搭综,卻和暖如春垢箕,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背兑巾。 一陣腳步聲響...
    開封第一講書人閱讀 32,829評(píng)論 1 269
  • 我被黑心中介騙來泰國(guó)打工条获, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人蒋歌。 一個(gè)月前我還...
    沈念sama閱讀 47,743評(píng)論 2 368
  • 正文 我出身青樓帅掘,卻偏偏與公主長(zhǎng)得像,于是被迫代替她去往敵國(guó)和親堂油。 傳聞我的和親對(duì)象是個(gè)殘疾皇子修档,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,629評(píng)論 2 354

推薦閱讀更多精彩內(nèi)容