一屋摇、產(chǎn)生的背景
隨著互聯(lián)網(wǎng)的發(fā)展晾嘶,網(wǎng)站應(yīng)用的規(guī)模不斷擴大,常規(guī)的垂直應(yīng)用架構(gòu)已無法應(yīng)對距糖,分布式服務(wù)架構(gòu)以及流動計算架構(gòu)勢在必行玄窝,亟需一個治理系統(tǒng)確保架構(gòu)有條不紊的演進牵寺。下面我們用一個圖來具體說明架構(gòu)和開發(fā)框架的演進過程。
單一應(yīng)用架構(gòu)
當(dāng)網(wǎng)站流量很小時哆料,只需一個應(yīng)用缸剪,將所有功能都部署在一起,以減少部署節(jié)點和成本东亦。此時,用于簡化增刪改查工作量的數(shù)據(jù)訪問框架(ORM)是關(guān)鍵唬渗。
垂直應(yīng)用架構(gòu)
當(dāng)訪問量逐漸增大典阵,單一應(yīng)用增加機器帶來的加速度越來越小,將應(yīng)用拆成互不相干的幾個應(yīng)用镊逝,以提升效率壮啊。此時,用于加速前端頁面開發(fā)的Web框架(MVC)是關(guān)鍵撑蒜。
分布式服務(wù)架構(gòu)
當(dāng)垂直應(yīng)用越來越多歹啼,應(yīng)用之間交互不可避免,將核心業(yè)務(wù)抽取出來座菠,作為獨立的服務(wù)狸眼,逐漸形成穩(wěn)定的服務(wù)中心,使前端應(yīng)用能更快速的響應(yīng)多變的市場需求浴滴。此時拓萌,用于提高業(yè)務(wù)復(fù)用及整合的分布式服務(wù)框架(RPC)是關(guān)鍵。
流動計算架構(gòu)
當(dāng)服務(wù)越來越多升略,容量的評估微王,小服務(wù)資源的浪費等問題逐漸顯現(xiàn),此時需增加一個調(diào)度中心基于訪問壓力實時管理集群容量品嚣,提高集群利用率炕倘。此時,用于提高機器利用率的資源調(diào)度和治理中心(SOA)是關(guān)鍵翰撑。
二罩旋、服務(wù)治理的需求
微服務(wù)架構(gòu)是互聯(lián)網(wǎng)很熱門的話題,是互聯(lián)網(wǎng)技術(shù)發(fā)展的必然結(jié)果额嘿。它提倡將單體應(yīng)用程序劃分成一組若干小的服務(wù)瘸恼,服務(wù)之間互相協(xié)調(diào)、互相配合册养,為用戶提供最終價值东帅。
單體應(yīng)用程序拆分成微服務(wù)后,服務(wù)治理是關(guān)鍵球拦。那么有沒有好的服務(wù)治理方案呢?答案是有的靠闭,而且很多人都在用這個框架帐我,它就是Dubbo。Dubbo是一個帶有服務(wù)治理功能的RPC框架愧膀,提供了一套較為完整的服務(wù)治理方案拦键,所以企業(yè)如果要實現(xiàn)服務(wù)化的話,Dubbo 是很好的一個選擇檩淋。這里簡單介紹一下Dubbo服務(wù)治理的幾個基本需求芬为。
在大規(guī)模服務(wù)化之前,應(yīng)用可能只是通過 RMI 或 Hessian 等工具蟀悦,簡單的暴露和引用遠程服務(wù)媚朦,通過配置服務(wù)的URL地址進行調(diào)用,通過 F5 等硬件進行負(fù)載均衡日戈。
當(dāng)服務(wù)越來越多時询张,服務(wù) URL 配置管理變得非常困難,F(xiàn)5 硬件負(fù)載均衡器的單點壓力也越來越大浙炼。此時需要一個服務(wù)注冊中心份氧,動態(tài)的注冊和發(fā)現(xiàn)服務(wù),使服務(wù)的位置透明弯屈。并通過在消費方獲取服務(wù)提供方地址列表蜗帜,實現(xiàn)軟負(fù)載均衡和 Failover,降低對 F5 硬件負(fù)載均衡器的依賴季俩,也能減少部分成本钮糖。
當(dāng)進一步發(fā)展,服務(wù)間依賴關(guān)系變得錯蹤復(fù)雜酌住,甚至分不清哪個應(yīng)用要在哪個應(yīng)用之前啟動店归,架構(gòu)師都不能完整的描述應(yīng)用的架構(gòu)關(guān)系。這時酪我,需要自動畫出應(yīng)用間的依賴關(guān)系圖消痛,以幫助架構(gòu)師理清關(guān)系。
接著都哭,服務(wù)的調(diào)用量越來越大秩伞,服務(wù)的容量問題就暴露出來,這個服務(wù)需要多少機器支撐?什么時候該加機器? 為了解決這些問題欺矫,第一步纱新,要將服務(wù)現(xiàn)在每天的調(diào)用量,響應(yīng)時間穆趴,都統(tǒng)計出來脸爱,作為容量規(guī)劃的參考指標(biāo)。其次未妹,要可以動態(tài)調(diào)整權(quán)重簿废,在線上空入,將某臺機器的權(quán)重一直加大,并在加大的過程中記錄響應(yīng)時間的變化族檬,直到響應(yīng)時間到達閾值歪赢,記錄此時的訪問量,再以此訪問量乘以機器數(shù)反推總?cè)萘俊?/p>
以上是 Dubbo 最基本的幾個需求单料。簡單的說埋凯,Dubbo就是個服務(wù)調(diào)用的框架,如果沒有分布式的需求扫尖,其實是不需要用的递鹉,只有在分布式的時候,才有使用Dubbo這樣的分布式服務(wù)框架的需求藏斩,并且本質(zhì)上是個服務(wù)調(diào)用的東東。其核心部分包含:
1. 遠程通訊:提供對多種基于長連接的NIO框架抽象封裝却盘,包括多種線程模型狰域、序列化以及“請求-響應(yīng)”模式的信息交換方式。
2. 集群容錯:提供基于接口方法的透明遠程過程調(diào)用黄橘,包括多協(xié)議支持以及軟負(fù)載均衡兆览,失敗容錯、地址路由塞关、動態(tài)配置等集群支持抬探。
3. 自動發(fā)現(xiàn):基于注冊中心目錄服務(wù),使服務(wù)消費方能動態(tài)的查找服務(wù)提供方帆赢,使地址透明小压,使服務(wù)提供方可以平滑增加或減少機器。
三椰于、Dubbo的架構(gòu)和特點
說完產(chǎn)生的背景和需求后怠益,下面具體談下Dubbo的總體架構(gòu)以及Dubbo的特點。
Dubbo總體架構(gòu)設(shè)計一共劃分了10層瘾婿,而最上面的Service層是留給實際想要使用Dubbo開發(fā)分布式服務(wù)的開發(fā)者實現(xiàn)業(yè)務(wù)邏輯的接口層蜻牢。圖中左邊淡藍背景的為服務(wù)消費方使用的接口,右邊淡綠色背景的為服務(wù)提供方使用的接口偏陪,位于中軸線上的為雙方都用到的接口抢呆。
下面,結(jié)合Dubbo官方文檔笛谦,理解一下總體架構(gòu)分層中抱虐,各個層次的設(shè)計要點:
1. 服務(wù)接口層(Service):該層是與實際業(yè)務(wù)邏輯相關(guān)的,根據(jù)服務(wù)提供方和服務(wù)消費方的業(yè)務(wù)設(shè)計對應(yīng)的接口和實現(xiàn)揪罕。
2. 配置層(Config):對外配置接口梯码,以ServiceConfig和ReferenceConfig為中心宝泵,可以直接new配置類,也可以通過Spring解析配置生成配置類轩娶。
3. 服務(wù)代理層(Proxy):服務(wù)接口透明代理儿奶,生成服務(wù)的客戶端Stub和服務(wù)器端Skeleton,以ServiceProxy為中心鳄抒,擴展接口為ProxyFactory闯捎。
4. 服務(wù)注冊層(Registry):封裝服務(wù)地址的注冊與發(fā)現(xiàn),以服務(wù)URL為中心许溅,擴展接口為RegistryFactory瓤鼻、Registry和RegistryService∠椭兀可能沒有服務(wù)注冊中心茬祷,此時服務(wù)提供方直接暴露服務(wù)。
5. 集群層(Cluster):封裝多個提供者的路由及負(fù)載均衡并蝗,并橋接注冊中心祭犯,以Invoker為中心,擴展接口為Cluster滚停、Directory沃粗、Router和LoadBalance。將多個服務(wù)提供方組合為一個服務(wù)提供方键畴,實現(xiàn)對服務(wù)消費方透明最盅,只需要與一個服務(wù)提供方進行交互。
6. 監(jiān)控層(Monitor):RPC調(diào)用次數(shù)和調(diào)用時間監(jiān)控起惕,以Statistics為中心煎娇,擴展接口為MonitorFactory朽砰、Monitor和MonitorService。
7. 遠程調(diào)用層(Protocol):封將RPC調(diào)用,以Invocation和Result為中心熟史,擴展接口為Protocol伍宦、Invoker和Exporter库物。Protocol是服務(wù)域拗秘,它是Invoker暴露和引用的主功能入口,它負(fù)責(zé)Invoker的生命周期管理草穆。Invoker是實體域灌灾,它是Dubbo的核心模型,其他模型都向它靠擾悲柱,或轉(zhuǎn)換成它锋喜,它代表一個可執(zhí)行體,可向它發(fā)起invoke調(diào)用。它有可能是一個本地的實現(xiàn)嘿般,也可能是一個遠程的實現(xiàn)段标,也可能是一個集群實現(xiàn)。
8. 信息交換層(Exchange):封裝請求響應(yīng)模式炉奴,同步轉(zhuǎn)異步逼庞,以Request和Response為中心,擴展接口為Exchanger瞻赶、ExchangeChannel赛糟、ExchangeClient和ExchangeServer。
9. 網(wǎng)絡(luò)傳輸層(Transport):抽象mina和netty為統(tǒng)一接口砸逊,以Message為中心璧南,擴展接口為Channel、Transporter师逸、Client司倚、Server和Codec。
10. 數(shù)據(jù)序列化層(Serialize):可復(fù)用的一些工具篓像,擴展接口為Serialization对湃、 ObjectInput、ObjectOutput和ThreadPool遗淳。
從上圖可以看出,Dubbo對于服務(wù)提供方和服務(wù)消費方心傀,從框架的10層中分別提供了各自需要關(guān)心和擴展的接口屈暗,構(gòu)建整個服務(wù)生態(tài)系統(tǒng)(服務(wù)提供方和服務(wù)消費方本身就是一個以服務(wù)為中心的)。
下圖是從Dubbo官網(wǎng)直接拿來的脂男,看一下基于RPC層养叛,服務(wù)提供方和服務(wù)消費方之間的調(diào)用關(guān)系,如圖所示:
節(jié)點角色說明
調(diào)用關(guān)系說明
0:服務(wù)容器負(fù)責(zé)啟動宰翅,加載弃甥,運行服務(wù)提供者。
1:服務(wù)提供者在啟動時汁讼,向注冊中心注冊自己提供的服務(wù)淆攻。
2:服務(wù)消費者在啟動時,向注冊中心訂閱自己所需的服務(wù)嘿架。
3:注冊中心返回服務(wù)提供者地址列表給消費者瓶珊,如果有變更,注冊中心將基于長連接推送變更數(shù)據(jù)給消費者耸彪。
4:服務(wù)消費者伞芹,從提供者地址列表中,基于軟負(fù)載均衡算法,選一臺提供者進行調(diào)用唱较,如果調(diào)用失敗扎唾,再選另一臺調(diào)用。
5:服務(wù)消費者和提供者南缓,在內(nèi)存中累計調(diào)用次數(shù)和調(diào)用時間胸遇,定時每分鐘發(fā)送一次統(tǒng)計數(shù)據(jù)到監(jiān)控中心。
Dubbo架構(gòu)采用的是一種非常簡單的模型西乖,要么是提供方提供服務(wù)狐榔,要么是消費方消費服務(wù),所以基于這一點可以抽象出服務(wù)提供方(Provider)和服務(wù)消費方(Consumer)兩個角色获雕。另外Dubbo架構(gòu)還具有以下幾個特點薄腻,連通性、健壯性届案、伸縮性庵楷、升級性,有關(guān)注冊中心楣颠、協(xié)議支持尽纽、服務(wù)監(jiān)控等內(nèi)容,也在特點里有詳細的描述童漩。
連通性(服務(wù)消費者和服務(wù)提供者的關(guān)聯(lián))
1. 注冊中心負(fù)責(zé)服務(wù)地址的注冊與查找弄贿,相當(dāng)于目錄服務(wù),服務(wù)提供者和消費者只在啟動時與注冊中心交互矫膨,注冊中心不轉(zhuǎn)發(fā)請求差凹,壓力較小。
2. 監(jiān)控中心負(fù)責(zé)統(tǒng)計各服務(wù)調(diào)用次數(shù)侧馅,調(diào)用時間等危尿,統(tǒng)計先在內(nèi)存匯總后每分鐘一次發(fā)送到監(jiān)控中心服務(wù)器,并以報表展示馁痴。
3. 服務(wù)提供者向注冊中心注冊其提供的服務(wù)谊娇,并匯報調(diào)用時間到監(jiān)控中心,此時間不包含網(wǎng)絡(luò)開銷罗晕。
4. 服務(wù)消費者向注冊中心獲取服務(wù)提供者地址列表济欢,并根據(jù)負(fù)載算法直接調(diào)用提供者,同時匯報調(diào)用時間到監(jiān)控中心小渊,此時間包含網(wǎng)絡(luò)開銷船逮。
5. 注冊中心,服務(wù)提供者粤铭,服務(wù)消費者三者之間均為長連接挖胃,監(jiān)控中心除外。
6. 注冊中心通過長連接感知服務(wù)提供者的存在,服務(wù)提供者宕機酱鸭,注冊中心將立即推送事件通知消費者吗垮。
7. 注冊中心和監(jiān)控中心全部宕機,不影響已運行的提供者和消費者凹髓,消費者在本地緩存了提供者列表烁登。
8. 注冊中心和監(jiān)控中心都是可選的,服務(wù)消費者可以直連服務(wù)提供者蔚舀。
健壯性(任意節(jié)點宕掉后饵沧,服務(wù)仍然可用)
1. 監(jiān)控中心宕掉不影響使用,只是丟失部分采樣數(shù)據(jù)赌躺。
2. 數(shù)據(jù)庫宕掉后狼牺,注冊中心仍能通過緩存提供服務(wù)列表查詢,但不能注冊新服務(wù)礼患。
3. 注冊中心對等集群是钥,任意一臺宕掉后,將自動切換到另一臺缅叠。
4. 注冊中心全部宕掉后悄泥,服務(wù)提供者和服務(wù)消費者仍能通過本地緩存通訊。
5. 服務(wù)提供者無狀態(tài)肤粱,任意一臺宕掉后弹囚,不影響使用。
6. 服務(wù)提供者全部宕掉后领曼,服務(wù)消費者應(yīng)用將無法使用余寥,并無限次重連等待服務(wù)提供者恢復(fù)。
伸縮性(節(jié)點可以自動增加)
1. 注冊中心為對等集群悯森,可動態(tài)增加機器部署實例,所有客戶端將自動發(fā)現(xiàn)新的注冊中心绪撵。
2. 服務(wù)提供者無狀態(tài)瓢姻,可動態(tài)增加機器部署實例,注冊中心將推送新的服務(wù)提供者信息給消費者音诈。
升級性(可平滑升級)
當(dāng)服務(wù)集群規(guī)模進一步擴大幻碱,帶動IT治理結(jié)構(gòu)進一步升級,需要實現(xiàn)動態(tài)部署细溅,進行流動計算褥傍,不會給現(xiàn)有分布式服務(wù)架構(gòu)帶來阻力。下圖是未來可能的一種調(diào)用架構(gòu):
節(jié)點角色說明:
四喇聊、總結(jié)
Dubbo是Alibaba開源的分布式服務(wù)框架恍风,并被廣泛應(yīng)用于各互聯(lián)網(wǎng)公司。Dubbo只需要通過Spring配置的方式即可完成服務(wù)化,對于應(yīng)用無入侵朋贬,其框架本身的成熟度以及文檔的完善程度凯楔,基本都能滿足各互聯(lián)網(wǎng)公司的業(yè)務(wù)需求。
如果你需要使用配置中心锦募、分布式跟蹤這些內(nèi)容則需要自己去集成摆屯,有一些定制化難度。另外一款開源分布式服務(wù)框架Spring Cloud 發(fā)展到現(xiàn)在糠亩,幾乎考慮了服務(wù)治理的方方面面虐骑,開發(fā)起來非常的便利和簡單。因此赎线,企業(yè)需要根據(jù)自身的研發(fā)水平和所處階段選擇合適的架構(gòu)來解決業(yè)務(wù)問題廷没,不管是Dubbo還是Spring Cloud都是實現(xiàn)微服務(wù)有效的工具。