FastCFS數(shù)據(jù)一致性模型之基礎(chǔ)結(jié)構(gòu)

? ? 保證數(shù)據(jù)一致性是對存儲(chǔ)系統(tǒng)的基本要求吞加,對于分布式文件系統(tǒng)來說挑戰(zhàn)比較大撮抓,本文將介紹FastCFS采用的數(shù)據(jù)一致性模型及基礎(chǔ)結(jié)構(gòu)。

? ? 說到數(shù)據(jù)一致性响鹃,大家會(huì)想到分布式系統(tǒng)必須符合CAP理論:一個(gè)分布式系統(tǒng)依啰,不可能完全滿足CAP乎串,只能做到其中的兩個(gè),即 CA速警、AP或CP叹誉。

CAP理論

? ? FastCFS的目標(biāo)是支持跑數(shù)據(jù)庫鸯两,保證數(shù)據(jù)一致性是基本要求;保證可用性也是分布式系統(tǒng)的一個(gè)基本要求长豁,因此FastCFS選擇全力做到 CA钧唐,萬一發(fā)生網(wǎng)絡(luò)分區(qū),可用性可能會(huì)受到影響蕉斜,但不會(huì)破壞數(shù)據(jù)一致性逾柿。FastCFS采用leader選舉過半數(shù)等機(jī)制防止腦裂缀棍,并且有數(shù)據(jù)校驗(yàn)及自動(dòng)修復(fù)功能宅此;v3.5支持?jǐn)?shù)據(jù)復(fù)制過半數(shù)機(jī)制,保證極端情況下數(shù)據(jù)一致性和可靠性爬范。FastCFS的leader和master不是基于中心節(jié)點(diǎn)父腕,而是以服務(wù)器分組為單元自洽的。由此可見FastCFS在架構(gòu)和實(shí)現(xiàn)機(jī)制上采用分而治之的局部化做法青瀑,最大程度地規(guī)避了發(fā)生網(wǎng)絡(luò)分區(qū)的風(fēng)險(xiǎn)璧亮。

? ? FastCFS對數(shù)據(jù)分組采用master/slave結(jié)構(gòu),對于服務(wù)器分組采用leader/follower結(jié)構(gòu)斥难。細(xì)心的朋友會(huì)有這樣的困惑:FastCFS居然有l(wèi)eader和master兩種角色枝嘶,只要其中一種不就可以了嗎?二者都是大家所熟知的概念哑诊,我相信業(yè)界一定有l(wèi)eader + master的做法群扶,但將二者并存于一組服務(wù)器,并且以原生方式實(shí)現(xiàn)镀裤,也許是FastCFS的獨(dú)創(chuàng)竞阐。

? ? FastCFS采用的是數(shù)據(jù)強(qiáng)一致模型,客戶端的更新操作只能在master上執(zhí)行暑劝,然后master通過RPC調(diào)用將更新操作同步給ACTIVE狀態(tài)(此狀態(tài)方可提供在線服務(wù))的slave骆莹。因服務(wù)重啟或網(wǎng)絡(luò)嚴(yán)重抖動(dòng)等異常導(dǎo)致slave掉線,slave將進(jìn)入數(shù)據(jù)恢復(fù)階段担猛,追上master的數(shù)據(jù)后幕垦,才能切換為ACTIVE狀態(tài)。

? ? 那么引入 leader/follower目的何在呢傅联?因?yàn)橐唤M服務(wù)器上通常會(huì)包含多個(gè)數(shù)據(jù)分組(為了便于集群擴(kuò)容會(huì)預(yù)分配較大的數(shù)據(jù)分組智嚷,比如1024個(gè);一組服務(wù)器上配置的數(shù)據(jù)分組建議不少于64個(gè))纺且,每個(gè)數(shù)據(jù)分組的master選舉如果按照選舉流程來一遍盏道,這個(gè)消耗太大。因此FastCFS創(chuàng)新地引入leader角色载碌,由leader直接任命其管轄的若干個(gè)數(shù)據(jù)分組的master猜嘱。一句話總結(jié)leader和master的產(chǎn)生機(jī)制:leader通過組內(nèi)服務(wù)器選舉產(chǎn)生衅枫,而master則由leader直接任命。

? ? 最后小結(jié)一下朗伶,本文介紹了FastCFS采用的數(shù)據(jù)一致性模型和基礎(chǔ)結(jié)構(gòu)弦撩,包括leader/follower和master/slave兩種。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末论皆,一起剝皮案震驚了整個(gè)濱河市益楼,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌点晴,老刑警劉巖感凤,帶你破解...
    沈念sama閱讀 222,000評論 6 515
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異粒督,居然都是意外死亡陪竿,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 94,745評論 3 399
  • 文/潘曉璐 我一進(jìn)店門屠橄,熙熙樓的掌柜王于貴愁眉苦臉地迎上來族跛,“玉大人,你說我怎么就攤上這事锐墙〗负澹” “怎么了?”我有些...
    開封第一講書人閱讀 168,561評論 0 360
  • 文/不壞的土叔 我叫張陵溪北,是天一觀的道長桐绒。 經(jīng)常有香客問我,道長刻盐,這世上最難降的妖魔是什么掏膏? 我笑而不...
    開封第一講書人閱讀 59,782評論 1 298
  • 正文 為了忘掉前任,我火速辦了婚禮敦锌,結(jié)果婚禮上馒疹,老公的妹妹穿的比我還像新娘。我一直安慰自己乙墙,他們只是感情好颖变,可當(dāng)我...
    茶點(diǎn)故事閱讀 68,798評論 6 397
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著听想,像睡著了一般腥刹。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上汉买,一...
    開封第一講書人閱讀 52,394評論 1 310
  • 那天衔峰,我揣著相機(jī)與錄音,去河邊找鬼。 笑死垫卤,一個(gè)胖子當(dāng)著我的面吹牛威彰,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播穴肘,決...
    沈念sama閱讀 40,952評論 3 421
  • 文/蒼蘭香墨 我猛地睜開眼歇盼,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了评抚?” 一聲冷哼從身側(cè)響起豹缀,我...
    開封第一講書人閱讀 39,852評論 0 276
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎慨代,沒想到半個(gè)月后邢笙,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 46,409評論 1 318
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡鱼响,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 38,483評論 3 341
  • 正文 我和宋清朗相戀三年鸣剪,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了组底。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片丈积。...
    茶點(diǎn)故事閱讀 40,615評論 1 352
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖债鸡,靈堂內(nèi)的尸體忽然破棺而出江滨,到底是詐尸還是另有隱情,我是刑警寧澤厌均,帶...
    沈念sama閱讀 36,303評論 5 350
  • 正文 年R本政府宣布唬滑,位于F島的核電站,受9級特大地震影響棺弊,放射性物質(zhì)發(fā)生泄漏晶密。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,979評論 3 334
  • 文/蒙蒙 一模她、第九天 我趴在偏房一處隱蔽的房頂上張望稻艰。 院中可真熱鬧,春花似錦侈净、人聲如沸尊勿。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,470評論 0 24
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽元扔。三九已至,卻和暖如春旋膳,著一層夾襖步出監(jiān)牢的瞬間澎语,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 33,571評論 1 272
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留擅羞,地道東北人盯孙。 一個(gè)月前我還...
    沈念sama閱讀 49,041評論 3 377
  • 正文 我出身青樓,卻偏偏與公主長得像祟滴,于是被迫代替她去往敵國和親振惰。 傳聞我的和親對象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 45,630評論 2 359

推薦閱讀更多精彩內(nèi)容