發(fā)簡信
IP屬地：北京
-
ResourceManager學(xué)習(xí)之ApplicationMaster,NodeManager管理
ApplicationMaster管理部分主要由三個服務(wù)構(gòu)成，分別是ApplicationMasterLauncher卧蜓、AMLiveliness...
-
Yarn底層基礎(chǔ)庫YARN基礎(chǔ)庫是其他一切模塊的基礎(chǔ),它的設(shè)計直接決定了YARN的穩(wěn)定性和擴(kuò)展性,YARN借用了MRV1的一些底層基礎(chǔ)庫,比如RPC庫等,但因?yàn)橐?..
-
Hadoop RPC機(jī)制詳解網(wǎng)絡(luò)通信模塊是分布式系統(tǒng)中最底層的模塊,他直接支撐了上層分布式環(huán)境下復(fù)雜的進(jìn)程間通信邏輯,是所有分布式系統(tǒng)的基礎(chǔ)空繁。遠(yuǎn)程過程調(diào)用(RPC)是一種常...
-
Yarn介紹(設(shè)計理念與基本架構(gòu))Yarn : 新的計算框架，是一個全局資源管理器圾叼，負(fù)責(zé)整個集群的資源管理和分配 一. Yarn產(chǎn)生背景 Hadoop1.0MR有局限性,概括...
-
Hadoop簡介
Hadoop : Hadoop是Apache基金會旗下的一個分布式系統(tǒng)基礎(chǔ)架構(gòu).主要包括 : 分布式文件系統(tǒng)HDFS,分布式資源管理系統(tǒng)Yarn...