分布式架構(gòu)的套路No.74

今天小蕉跟大伙一起聊聊分布式系統(tǒng)的架構(gòu)的套路。在開始說套路之前角塑,大家先思考一個問題,為什么要進行分布式架構(gòu)溜宽?

大多數(shù)的開發(fā)者大多數(shù)的系統(tǒng)可能從來沒接觸過分布式系統(tǒng)吉拳,也根本沒必要進行分布式系統(tǒng)架構(gòu),為什么适揉?因為在訪問量或者QPS沒有達到單臺機器的性能瓶頸的時候留攒,根本沒必要進行分布式架構(gòu)。那如果業(yè)務量上來了嫉嘀,一般會怎么解決呢炼邀?

首先考慮的就是機器升級。機器配置的垂直擴展剪侮,首先要找到當前性能的瓶頸點拭宁,是CPU,是內(nèi)存瓣俯,是硬盤杰标,還是帶寬。砸錢加CPU彩匕,砸錢換SSD硬盤腔剂,砸錢換1T內(nèi)存,這通常是解決問題最直接也最高效的方法驼仪。帶寬不夠掸犬?加帶寬,1G不夠用100G绪爸。CPU 8核不夠湾碎?搞32核96核。這是絕大多數(shù)公司能思考到的第一個方案奠货,也是最高效最快最安全的方法介褥,立竿見影。

其次就是系統(tǒng)拆分,將所提供服務的主流程以及支線流程梳理出來呻顽,按照流程進行系統(tǒng)拆分雹顺。如同一棵樹,核心業(yè)務作為主干流程廊遍,其他系統(tǒng)按照需要進行拆分嬉愧,如同樹的開枝散葉。所采取的方式有這么一些喉前,按前后端進行拆分没酣,按照領域拆分,按團隊拆分卵迂,當然通常來說這些拆分基本都要跟著組織架構(gòu)走裕便。

再不行就進行技術升級,更換更加高效或者場景適合的技術见咒。比如從 Oracle 更換到HBase偿衰。從A數(shù)據(jù)庫連接池更換到B數(shù)據(jù)庫連接池。技術的變革對于業(yè)務量的支持也是非常巨大的改览,同一臺機器不同的技術下翎,效能發(fā)揮的程度可以說有天壤之別。

最后的最后手段才會考慮分布式架構(gòu)宝当,實在是砸不出這么多錢了视事,實在是沒辦法了。因為分布式架構(gòu)肯定會帶來非常多非常多的一致性問題庆揩,原本只需要訪問一臺機器俐东,現(xiàn)在需要訪問N臺,那么這N臺機器的一致性怎么保證订晌,以前撐死搞個主從備份就算完了虏辫,定時同步一下數(shù)據(jù)就好,現(xiàn)在N臺設備的數(shù)據(jù)怎么管理锈拨,甚至這個集群本身怎么管理乒裆,都會成為一個致命的問題。

所以只有等業(yè)務量到達一定程度了推励,單臺機器扛不住了,才會開始堆錢升級機器肉迫,系統(tǒng)拆分验辞,換技術,繼續(xù)堆錢升級機器喊衫,系統(tǒng)拆分...周而復始跌造,發(fā)現(xiàn)成本太高或者技術已經(jīng)到達上線了。最后沒辦法,就選擇分布式架構(gòu)了壳贪。

但是分布式架構(gòu)的優(yōu)勢也是明顯的陵珍,用一群低廉的設備,來提供一個高性能高吞吐量的穩(wěn)定的系統(tǒng)违施,下面開始說說常見的分布式集群的架構(gòu)互纯。

1、純負載均衡形式磕蒲。

在集群前面留潦,前置一個流量分發(fā)的組件進行流量分發(fā)觅廓,整個集群的機器提供無差別的服務质礼,這在常見的 web 服務器中是最最常見的。目前比較主流的方式就是整個集群機器上云谆吴,根據(jù)實時的調(diào)用量進行云服務器彈性伸縮站削。常見的負載均衡有硬件層面的 F5坊萝、軟件層面的 nginx 等。

640-2.jpeg

2许起、領導選舉型

整個集群的消息都會轉(zhuǎn)發(fā)到集群的領導這里十偶,是一種 master-slavers,區(qū)別只是這個 master 是被臨時選舉出來的街氢,一旦 master 宕機扯键,集群會立刻選舉出一個新的領導,繼續(xù)對外提供服務珊肃。使用領導選舉型架構(gòu)的典型的應用有 ElasticSearch荣刑,zookeeper。

640-3.jpeg

3伦乔、區(qū)塊鏈型

整個集群的每一個節(jié)點都可以進行記錄厉亏,但是記錄的內(nèi)容要得到整個集群 N 個機器的認可才是合法的。典型的應用有 Bit Coin烈和,以及 Hyperledger爱只。

640-4.jpeg

4、master-slaver型

整個集群以某臺 master 為中樞招刹,進行集群的調(diào)度恬试。交互是這樣,一般會把所有的管理類型的數(shù)據(jù)放到 master 上疯暑,而把具體的數(shù)據(jù)放到 slaver 上训柴,實際進行調(diào)用的時候,client 先調(diào)用 master 獲取數(shù)據(jù)所存放的 server 的 信息妇拯,再自行跟 slave 進行交互幻馁。典型的系統(tǒng)有 Hadoop洗鸵。集群,HBase 集群仗嗦,Redis 集群等膘滨。

640-5.jpeg

5、規(guī)則型一致性Hash

這種架構(gòu)類型一般出現(xiàn)在數(shù)據(jù)庫分庫分表的設計中稀拐。按照規(guī)則進行分庫分表火邓,在查詢之前使用規(guī)則引擎進行庫和表的確認,再對具體的應用進行訪問钩蚊。為什么要用一致性 Hash 贡翘?其實用什么都可以,只是對于這類應用來說一致性 Hash 比較常見而已砰逻。

640-6.jpeg

好了鸣驱,至此,已經(jīng)把我所知道的大部分分布式集群的套路說完了蝠咆,總結(jié)一下踊东。

1、升級機器配置是最直接的升級方式刚操。不到萬不得已不會使用分布式

2闸翅、分布式的核心就是業(yè)務拆分以及流量分發(fā)。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末菊霜,一起剝皮案震驚了整個濱河市坚冀,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌鉴逞,老刑警劉巖记某,帶你破解...
    沈念sama閱讀 221,273評論 6 515
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異构捡,居然都是意外死亡液南,警方通過查閱死者的電腦和手機,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 94,349評論 3 398
  • 文/潘曉璐 我一進店門勾徽,熙熙樓的掌柜王于貴愁眉苦臉地迎上來滑凉,“玉大人,你說我怎么就攤上這事喘帚〕╂ⅲ” “怎么了?”我有些...
    開封第一講書人閱讀 167,709評論 0 360
  • 文/不壞的土叔 我叫張陵吹由,是天一觀的道長涡匀。 經(jīng)常有香客問我,道長溉知,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 59,520評論 1 296
  • 正文 為了忘掉前任,我火速辦了婚禮级乍,結(jié)果婚禮上舌劳,老公的妹妹穿的比我還像新娘。我一直安慰自己玫荣,他們只是感情好甚淡,可當我...
    茶點故事閱讀 68,515評論 6 397
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著捅厂,像睡著了一般贯卦。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上焙贷,一...
    開封第一講書人閱讀 52,158評論 1 308
  • 那天撵割,我揣著相機與錄音,去河邊找鬼辙芍。 笑死啡彬,一個胖子當著我的面吹牛,可吹牛的內(nèi)容都是我干的故硅。 我是一名探鬼主播庶灿,決...
    沈念sama閱讀 40,755評論 3 421
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼吃衅!你這毒婦竟也來了往踢?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 39,660評論 0 276
  • 序言:老撾萬榮一對情侶失蹤徘层,失蹤者是張志新(化名)和其女友劉穎峻呕,沒想到半個月后,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體惑灵,經(jīng)...
    沈念sama閱讀 46,203評論 1 319
  • 正文 獨居荒郊野嶺守林人離奇死亡山上,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 38,287評論 3 340
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了英支。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片佩憾。...
    茶點故事閱讀 40,427評論 1 352
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖干花,靈堂內(nèi)的尸體忽然破棺而出妄帘,到底是詐尸還是另有隱情,我是刑警寧澤池凄,帶...
    沈念sama閱讀 36,122評論 5 349
  • 正文 年R本政府宣布抡驼,位于F島的核電站,受9級特大地震影響肿仑,放射性物質(zhì)發(fā)生泄漏致盟。R本人自食惡果不足惜碎税,卻給世界環(huán)境...
    茶點故事閱讀 41,801評論 3 333
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望馏锡。 院中可真熱鬧雷蹂,春花似錦、人聲如沸杯道。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,272評論 0 23
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽党巾。三九已至萎庭,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間齿拂,已是汗流浹背驳规。 一陣腳步聲響...
    開封第一講書人閱讀 33,393評論 1 272
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留创肥,地道東北人达舒。 一個月前我還...
    沈念sama閱讀 48,808評論 3 376
  • 正文 我出身青樓,卻偏偏與公主長得像叹侄,于是被迫代替她去往敵國和親巩搏。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 45,440評論 2 359

推薦閱讀更多精彩內(nèi)容