簡單分析Ambari——頂級Hadoop管理方案

前面我們提到了兩個比較火的Hadoop集群運維管理工具 Ambari和Cloudera Manager。它們集安裝沸版,配置贱除,監(jiān)控于一身尚氛,對于Hadoop的初學(xué)者可以起到很好的幫助作用。這篇文章就對Ambari著重介紹一下讹弯,看一下它相關(guān)的一些架構(gòu)况既,對于后面我們自己開發(fā)基于Apache Hadoop發(fā)行版的自動安裝服務(wù)有幫助。

關(guān)于Ambari的簡介和安裝大家可以看這篇文章:Ambari——大數(shù)據(jù)平臺的搭建利器

Ambari擁有很多的功能组民,它的大部分功能都是基于一些優(yōu)秀的開源項目棒仍,Ambari充分的將它們結(jié)合起來從而實現(xiàn)在分布式環(huán)境中的集群式服務(wù)管理能力,監(jiān)控能力邪乍,展示能力等等降狠。

比如服務(wù)的管理(安裝对竣,卸載,更新等等)是基于puppet榜配。puppet是一個非常成熟和優(yōu)秀的運維工具否纬,而監(jiān)控部分除了JMX相關(guān)的還利用了Nagios和Ganglia等監(jiān)控項目。

Ambari框架是Server/Client模式蛋褥。

其中Ambari Server除了基本的用戶临燃,組,集群信息管理之外烙心,還提供了Rest API膜廊,一部分是接受Ambari Client發(fā)送的心跳請求以及各種數(shù)據(jù)采集信息,一部分是監(jiān)控管理功能淫茵。通過Rest API可以讓我們更加簡潔愉快的操作Ambari爪瓜。

圖片描述
圖片描述

而Ambari Client 負(fù)責(zé)采集節(jié)點相關(guān)信息且發(fā)送心跳給Ambari Server,同時還需要執(zhí)行來自Ambari Server的命令(諸如程序安裝和服務(wù)啟動終止等)

圖片描述
圖片描述

Ambari將所有的服務(wù)都抽象成資源匙瘪,這使得它非常容易擴展铆铆,擴展自定義Service詳細(xì)介紹大家可以看一下:擴展Ambari管理一個自定義的Service ,這個里面自定義Service小結(jié)講的非常詳細(xì)丹喻。這里就不贅述了薄货。

之所以對Ambari的架構(gòu)進行了解是為了幫助我們?nèi)ピO(shè)計我們自己的Hadoop集群安裝服務(wù),那么如果我們需要做一個類似的集群管理服務(wù)碍论,那么我們都需要哪些功能谅猾?該怎樣設(shè)計呢?

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末鳍悠,一起剝皮案震驚了整個濱河市税娜,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌贼涩,老刑警劉巖巧涧,帶你破解...
    沈念sama閱讀 216,496評論 6 501
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異遥倦,居然都是意外死亡,警方通過查閱死者的電腦和手機占锯,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,407評論 3 392
  • 文/潘曉璐 我一進店門袒哥,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人消略,你說我怎么就攤上這事堡称。” “怎么了艺演?”我有些...
    開封第一講書人閱讀 162,632評論 0 353
  • 文/不壞的土叔 我叫張陵却紧,是天一觀的道長桐臊。 經(jīng)常有香客問我,道長晓殊,這世上最難降的妖魔是什么断凶? 我笑而不...
    開封第一講書人閱讀 58,180評論 1 292
  • 正文 為了忘掉前任,我火速辦了婚禮巫俺,結(jié)果婚禮上认烁,老公的妹妹穿的比我還像新娘。我一直安慰自己介汹,他們只是感情好却嗡,可當(dāng)我...
    茶點故事閱讀 67,198評論 6 388
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著嘹承,像睡著了一般窗价。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上叹卷,一...
    開封第一講書人閱讀 51,165評論 1 299
  • 那天舌镶,我揣著相機與錄音,去河邊找鬼豪娜。 笑死餐胀,一個胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的瘤载。 我是一名探鬼主播否灾,決...
    沈念sama閱讀 40,052評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼鸣奔!你這毒婦竟也來了墨技?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 38,910評論 0 274
  • 序言:老撾萬榮一對情侶失蹤挎狸,失蹤者是張志新(化名)和其女友劉穎扣汪,沒想到半個月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體锨匆,經(jīng)...
    沈念sama閱讀 45,324評論 1 310
  • 正文 獨居荒郊野嶺守林人離奇死亡崭别,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 37,542評論 2 332
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了恐锣。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片茅主。...
    茶點故事閱讀 39,711評論 1 348
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖土榴,靈堂內(nèi)的尸體忽然破棺而出诀姚,到底是詐尸還是另有隱情,我是刑警寧澤玷禽,帶...
    沈念sama閱讀 35,424評論 5 343
  • 正文 年R本政府宣布赫段,位于F島的核電站呀打,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏糯笙。R本人自食惡果不足惜贬丛,卻給世界環(huán)境...
    茶點故事閱讀 41,017評論 3 326
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望炬丸。 院中可真熱鬧瘫寝,春花似錦、人聲如沸稠炬。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,668評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽首启。三九已至暮屡,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間毅桃,已是汗流浹背褒纲。 一陣腳步聲響...
    開封第一講書人閱讀 32,823評論 1 269
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留钥飞,地道東北人莺掠。 一個月前我還...
    沈念sama閱讀 47,722評論 2 368
  • 正文 我出身青樓,卻偏偏與公主長得像读宙,于是被迫代替她去往敵國和親彻秆。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 44,611評論 2 353

推薦閱讀更多精彩內(nèi)容

  • Spring Cloud為開發(fā)人員提供了快速構(gòu)建分布式系統(tǒng)中一些常見模式的工具(例如配置管理结闸,服務(wù)發(fā)現(xiàn)唇兑,斷路器,智...
    卡卡羅2017閱讀 134,651評論 18 139
  • 一桦锄、系統(tǒng)參數(shù)配置優(yōu)化 1扎附、系統(tǒng)內(nèi)核參數(shù)優(yōu)化配置 修改文件/etc/sysctl.conf,添加如下配置结耀,然后執(zhí)行s...
    張偉科閱讀 3,748評論 0 14
  • Ambari介紹 Ambari是Hadoop分布式集群配置管理工具留夜,是由hortonworks主導(dǎo)的開源項目,它已...
    mikeliuy閱讀 3,085評論 1 5
  • 超市買水和面包45 景區(qū)840 泡面37 景區(qū)買水16 漂流保險饼记,儲物柜共37 生日蛋糕129.禚電子支付 超市買水12
    謙謙luckystar閱讀 101評論 0 0
  • 1. 問題描述 MATLAB第三方工具箱輸出的圖像香伴,往往需要進一步處理,例如 這兩張圖像具则,最好在MATLAB中合成...
    馬騁閱讀 20,448評論 0 5