Raft協(xié)議如何解決分布式系統(tǒng)一致性問題

先要明確的幾個概念

  • Raft協(xié)議是基于paxos multi的桨螺,屬于全新優(yōu)化精簡版本耕魄,更加容易實現(xiàn)和理解。zookeeper用的zab協(xié)議跟raft基本一樣彭谁,就是心跳方向是反的吸奴,raft是leader向follower發(fā)送心跳,zab是follower向leader發(fā)送心跳詢問leader健康狀況。
  • 再有一個就是则奥,raft考润、paxos、zab這些屬于強(qiáng)一致性協(xié)議读处,與之相對的還有弱一致性協(xié)議糊治,比如DNS的工作原理,比如Cassandra和redis cluster模式用到的gossip協(xié)議等罚舱。弱一致性也叫最終一致性井辜。一般來說弱一致性的系統(tǒng)性能要好于強(qiáng)一致性。對讀寫并發(fā)要求比較高的場景應(yīng)該想辦法優(yōu)先使用弱一致性協(xié)議管闷。

解決問題的核心

Raft將狀態(tài)機(jī)復(fù)制(state machine replication)或者說分布式一致性問題分解為3個子問題:

  1. leader選舉
  2. log復(fù)制
  3. 異常狀況下的數(shù)據(jù)安全性:leader宕機(jī)粥脚、選主平票、分區(qū)腦裂

leader選舉

  1. 集群啟動初始狀態(tài)下所有節(jié)點都是follower包个,這時候follower會觸發(fā)選舉刷允。當(dāng)follower無法在本地計時的隨機(jī)超時時間內(nèi)收到leader的心跳包,也會觸發(fā)選舉碧囊。
  2. 達(dá)到自己超時時間的follower就變成Candidate树灶,然后會向集群中的其他節(jié)點發(fā)送拉票請求,每個節(jié)點會投票給最先發(fā)給自己拉票請求的節(jié)點糯而,當(dāng)某個節(jié)點獲得超過半數(shù)節(jié)點的票時天通,會當(dāng)選為新的leader。每個leader任期內(nèi)都有一個唯一的term熄驼,表示當(dāng)前集群處于這個節(jié)點作為leader這樣一個階段像寒。

Log復(fù)制

  1. 首先所有的寫請求必須都由leader處理
  2. leader會先寫本地的log但未真正去寫數(shù)據(jù)、也就是這個寫在本地是寫未提交的這樣一個中間狀態(tài)谜洽。然后在心跳包中包含寫請求,將操作給follower吴叶。follower收到寫請求之后阐虚,也在本地寫log,進(jìn)入寫未提交狀態(tài)蚌卤,同時回復(fù)leader实束。
  3. leader收到超過半數(shù)的follower的回復(fù)之后,會先commit提交本地的寫log逊彭,數(shù)據(jù)真正寫入咸灿、然后返回客戶端數(shù)據(jù)寫入成功。最后通知各個follower:leader已提交該寫操作侮叮,各位也提交這個操作避矢。
  4. follower收到leader的提交通知之后,提交自己本地對應(yīng)的寫log。整個過程結(jié)束审胸。
    ps: leader應(yīng)該是會為每個follower維護(hù)一個同步進(jìn)度或者說日志offset的表亥宿,這樣可以清楚知道每個follower的數(shù)據(jù)log復(fù)制的進(jìn)度。
    比如某個follower宕機(jī)了一陣子砂沛,再恢復(fù)的時候leader仍然會幫它把落下的這段時間的課補(bǔ)上烫扼。因為leader知道它的復(fù)制進(jìn)度。

異常狀態(tài)下的數(shù)據(jù)安全性

leader宕機(jī)

每個follower會不斷的隨機(jī)設(shè)置一個超時時間timeout碍庵,然后從0開始計時映企,在timeout之內(nèi)收到leader的心跳包則會重新從0開始計時。
一旦計時到timeout仍未收到leader的心跳包静浴,這個follower就會啟動 “變candidate -> 向其他節(jié)點拉票 -> 嘗試得到超過半數(shù)票成為leader” 這樣一個流程堰氓。

選主平票

如果出現(xiàn)這個狀況,平票的兩個節(jié)點會各自再來一次隨機(jī)timeout倒數(shù)马绝,然后重新拉票豆赏。這樣因為兩個隨機(jī)timeout總會有一個時間差的存在、基本大概率兩者之間會產(chǎn)生一個勝出者了富稻。

分區(qū)腦裂

這里體現(xiàn)出為什么節(jié)點個數(shù)要定奇數(shù)個了掷邦。
如果是偶數(shù)個,那么發(fā)生分區(qū)的時候可能會出現(xiàn)兩個分區(qū)的節(jié)點一樣多的情況:沒有l(wèi)eader的區(qū)無法選出新leader椭赋,而有l(wèi)eader的區(qū)在寫日志復(fù)制時無法得到超過半數(shù)的follower的回復(fù)(自己也算)抚岗、無法commit所以無法回復(fù)客戶端已寫入、只能回復(fù)unknown哪怔。這樣整個系統(tǒng)呈現(xiàn)出不可用的狀態(tài)宣蔚。
而奇數(shù)個節(jié)點的集群發(fā)生分區(qū),總會有一大一小兩個分區(qū):如果leader在大分區(qū)认境、可以收到半數(shù)以上的回復(fù)胚委、可以commit寫日志,集群正常工作叉信;如果leader在小分區(qū)亩冬,由于大分區(qū)超半數(shù)節(jié)點、會選舉出來新leader硼身,當(dāng)小分區(qū)的舊leader收到寫請求之后硅急,無法達(dá)到半數(shù)回復(fù),寫會失敗佳遂。這樣客戶端可以選擇新leader進(jìn)行請求营袜,集群整體可用。
ps:分區(qū)恢復(fù)之后丑罪、舊leader收到新leader的心跳包會發(fā)現(xiàn)term比自己的新荚板,所以會變成follower與新leader進(jìn)行同步凤壁。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市啸驯,隨后出現(xiàn)的幾起案子客扎,更是在濱河造成了極大的恐慌,老刑警劉巖罚斗,帶你破解...
    沈念sama閱讀 222,183評論 6 516
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件徙鱼,死亡現(xiàn)場離奇詭異,居然都是意外死亡针姿,警方通過查閱死者的電腦和手機(jī)袱吆,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 94,850評論 3 399
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來距淫,“玉大人绞绒,你說我怎么就攤上這事¢畔荆” “怎么了蓬衡?”我有些...
    開封第一講書人閱讀 168,766評論 0 361
  • 文/不壞的土叔 我叫張陵,是天一觀的道長彤枢。 經(jīng)常有香客問我狰晚,道長,這世上最難降的妖魔是什么缴啡? 我笑而不...
    開封第一講書人閱讀 59,854評論 1 299
  • 正文 為了忘掉前任壁晒,我火速辦了婚禮,結(jié)果婚禮上业栅,老公的妹妹穿的比我還像新娘秒咐。我一直安慰自己,他們只是感情好碘裕,可當(dāng)我...
    茶點故事閱讀 68,871評論 6 398
  • 文/花漫 我一把揭開白布携取。 她就那樣靜靜地躺著,像睡著了一般帮孔。 火紅的嫁衣襯著肌膚如雪雷滋。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 52,457評論 1 311
  • 那天你弦,我揣著相機(jī)與錄音惊豺,去河邊找鬼燎孟。 笑死禽作,一個胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的揩页。 我是一名探鬼主播旷偿,決...
    沈念sama閱讀 40,999評論 3 422
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了萍程?” 一聲冷哼從身側(cè)響起幢妄,我...
    開封第一講書人閱讀 39,914評論 0 277
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎茫负,沒想到半個月后蕉鸳,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 46,465評論 1 319
  • 正文 獨居荒郊野嶺守林人離奇死亡忍法,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 38,543評論 3 342
  • 正文 我和宋清朗相戀三年潮尝,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片饿序。...
    茶點故事閱讀 40,675評論 1 353
  • 序言:一個原本活蹦亂跳的男人離奇死亡勉失,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出原探,到底是詐尸還是另有隱情乱凿,我是刑警寧澤,帶...
    沈念sama閱讀 36,354評論 5 351
  • 正文 年R本政府宣布咽弦,位于F島的核電站徒蟆,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏离唬。R本人自食惡果不足惜后专,卻給世界環(huán)境...
    茶點故事閱讀 42,029評論 3 335
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望输莺。 院中可真熱鬧戚哎,春花似錦、人聲如沸嫂用。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,514評論 0 25
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽嘱函。三九已至甘畅,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間往弓,已是汗流浹背疏唾。 一陣腳步聲響...
    開封第一講書人閱讀 33,616評論 1 274
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機(jī)就差點兒被人妖公主榨干…… 1. 我叫王不留函似,地道東北人槐脏。 一個月前我還...
    沈念sama閱讀 49,091評論 3 378
  • 正文 我出身青樓,卻偏偏與公主長得像撇寞,于是被迫代替她去往敵國和親顿天。 傳聞我的和親對象是個殘疾皇子堂氯,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 45,685評論 2 360

推薦閱讀更多精彩內(nèi)容