2020-03-20

Hadoop框架中的Yarn機(jī)制

ResourceManager,ApplicationMaster,NodeManager,Container數(shù)據(jù)交互圖

流程

1.Client提交任務(wù)

2.ResourceManager創(chuàng)建ApplicationMaster

3.ApplicationMaster向ResourceManager注冊(cè)

4.ResourceManager向ApplicationMananger請(qǐng)求資源

5.ApplicationMaster向NodeManager請(qǐng)求創(chuàng)建執(zhí)行Container

6.Container運(yùn)行Task并將狀態(tài)信息反饋給ApplicatinManager

7.ApplicationMaster將任務(wù)運(yùn)行狀態(tài)反饋給Client

8.任務(wù)完成ApplicationMaster向ResourceManager注銷(xiāo)

• 人面猴

  序言：七十年代末，一起剝皮案震驚了整個(gè)濱河市，隨后出現(xiàn)的幾起案子瓤漏，更是在濱河造成了極大的恐慌吊洼，老刑警劉巖季稳，帶你破解...

  沈念sama閱讀 221,198評(píng)論 6贊 514
• 死咒

  序言：濱河連續(xù)發(fā)生了三起死亡事件劲适，死亡現(xiàn)場(chǎng)離奇詭異满力，居然都是意外死亡狰住，警方通過(guò)查閱死者的電腦和手機(jī)张吉，發(fā)現(xiàn)死者居然都...

  沈念sama閱讀 94,334評(píng)論 3贊 398
• 救了他兩次的神仙讓他今天三更去死

  文/潘曉璐 我一進(jìn)店門(mén)，熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái)转晰，“玉大人芦拿，你說(shuō)我怎么就攤上這事士飒。” “怎么了蔗崎？”我有些...

  開(kāi)封第一講書(shū)人閱讀 167,643評(píng)論 0贊 360
• 道士緝兇錄：失蹤的賣(mài)姜人

  文/不壞的土叔 我叫張陵酵幕，是天一觀的道長(zhǎng)。 經(jīng)常有香客問(wèn)我缓苛，道長(zhǎng)芳撒，這世上最難降的妖魔是什么？ 我笑而不...

  開(kāi)封第一講書(shū)人閱讀 59,495評(píng)論 1贊 296
• ?港島之戀（遺憾婚禮）

  正文 為了忘掉前任未桥，我火速辦了婚禮笔刹，結(jié)果婚禮上，老公的妹妹穿的比我還像新娘冬耿。我一直安慰自己舌菜，他們只是感情好，可當(dāng)我...

  茶點(diǎn)故事閱讀 68,502評(píng)論 6贊 397
• 惡毒庶女頂嫁案：這布局不是一般人想出來(lái)的

  文/花漫 我一把揭開(kāi)白布亦镶。 她就那樣靜靜地躺著日月，像睡著了一般。 火紅的嫁衣襯著肌膚如雪缤骨。 梳的紋絲不亂的頭發(fā)上爱咬，一...

  開(kāi)封第一講書(shū)人閱讀 52,156評(píng)論 1贊 308
• 城市分裂傳說(shuō)

  那天，我揣著相機(jī)與錄音绊起，去河邊找鬼精拟。 笑死，一個(gè)胖子當(dāng)著我的面吹牛虱歪，可吹牛的內(nèi)容都是我干的蜂绎。 我是一名探鬼主播，決...

  沈念sama閱讀 40,743評(píng)論 3贊 421
• 雙鴛鴦連環(huán)套：你想象不到人心有多黑

  文/蒼蘭香墨 我猛地睜開(kāi)眼实蔽，長(zhǎng)吁一口氣：“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼荡碾！你這毒婦竟也來(lái)了？” 一聲冷哼從身側(cè)響起局装，我...

  開(kāi)封第一講書(shū)人閱讀 39,659評(píng)論 0贊 276
• 萬(wàn)榮殺人案實(shí)錄

  序言：老撾萬(wàn)榮一對(duì)情侶失蹤坛吁，失蹤者是張志新（化名）和其女友劉穎，沒(méi)想到半個(gè)月后铐尚，有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體拨脉，經(jīng)...

  沈念sama閱讀 46,200評(píng)論 1贊 319
• ?護(hù)林員之死

  正文 獨(dú)居荒郊野嶺守林人離奇死亡，尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...

  茶點(diǎn)故事閱讀 38,282評(píng)論 3贊 340
• ?白月光啟示錄

  正文 我和宋清朗相戀三年宣增，在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了玫膀。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...

  茶點(diǎn)故事閱讀 40,424評(píng)論 1贊 352
• 活死人

  序言：一個(gè)原本活蹦亂跳的男人離奇死亡爹脾，死狀恐怖帖旨，靈堂內(nèi)的尸體忽然破棺而出箕昭，到底是詐尸還是另有隱情，我是刑警寧澤解阅，帶...

  沈念sama閱讀 36,107評(píng)論 5贊 349
• ?日本核電站爆炸內(nèi)幕

  正文 年R本政府宣布落竹，位于F島的核電站，受9級(jí)特大地震影響货抄，放射性物質(zhì)發(fā)生泄漏述召。R本人自食惡果不足惜，卻給世界環(huán)境...

  茶點(diǎn)故事閱讀 41,789評(píng)論 3贊 333
• 男人毒藥：我在死后第九天來(lái)索命

  文/蒙蒙 一蟹地、第九天 我趴在偏房一處隱蔽的房頂上張望积暖。 院中可真熱鬧，春花似錦怪与、人聲如沸夺刑。這莊子的主人今日做“春日...

  開(kāi)封第一講書(shū)人閱讀 32,264評(píng)論 0贊 23
• 一樁弒父案琼梆，背后竟有這般陰謀

  文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)性誉。三九已至窿吩，卻和暖如春茎杂，著一層夾襖步出監(jiān)牢的瞬間，已是汗流浹背纫雁。 一陣腳步聲響...

  開(kāi)封第一講書(shū)人閱讀 33,390評(píng)論 1贊 271
• 情欲美人皮

  我被黑心中介騙來(lái)泰國(guó)打工煌往， 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留，地道東北人轧邪。 一個(gè)月前我還...

  沈念sama閱讀 48,798評(píng)論 3贊 376
• 代替公主和親

  正文 我出身青樓刽脖，卻偏偏與公主長(zhǎng)得像，于是被迫代替她去往敵國(guó)和親忌愚。 傳聞我的和親對(duì)象是個(gè)殘疾皇子曲管，可洞房花燭夜當(dāng)晚...

  茶點(diǎn)故事閱讀 45,435評(píng)論 2贊 359

推薦閱讀更多精彩內(nèi)容

• YARN源碼解析(4)-ResourceManager, NodeManager以及Appli...

  在之前的Hadoop版本中，是不存在ResourceManager, NodeManager的概念的硕糊，此時(shí)院水，只有J...

  AlstonWilliams閱讀 5,075評(píng)論 0贊 2
• Hadoop 學(xué)習(xí)系列（三）之 YARN 詳細(xì)解析

  原文地址：http://pengtuo.tech/2018/09/22/yarn-architecture/ 一、...

  PeTu閱讀 26,179評(píng)論 0贊 8
• Spark運(yùn)行原理

  本文主要分以下章節(jié)： 一简十、Spark專(zhuān)業(yè)術(shù)語(yǔ)定義 二檬某、 Spark的任務(wù)提交機(jī)制 一、Spark專(zhuān)業(yè)術(shù)語(yǔ)定義 1螟蝙、...

  數(shù)據(jù)萌新閱讀 440評(píng)論 0贊 0
• Spark運(yùn)行原理

  本文主要分以下章節(jié)： 一恢恼、Spark專(zhuān)業(yè)術(shù)語(yǔ)定義 二、 Spark的任務(wù)提交機(jī)制 一胰默、Spark專(zhuān)業(yè)術(shù)語(yǔ)定義 1场斑、...

  小豬Harry閱讀 324評(píng)論 0贊 1
• Hadoop- yarn notes

  Yarn基礎(chǔ)架構(gòu) 1 YARN產(chǎn)生背景 最早的hadoop是由hdfs和mr組成的漓踢，hdfs負(fù)責(zé)存儲(chǔ)，mr負(fù)責(zé)計(jì)算...

  raincoffee閱讀 716評(píng)論 0贊 1