MapReduce設(shè)計(jì)模式--元模式

一、含義

元模式不是用于解決某個(gè)具體問題的配喳,而是處理模式之間關(guān)系的酪穿,可以理解為“模式的模式”。

二界逛、實(shí)現(xiàn)方法

元模式主要有二種實(shí)現(xiàn)方法:作業(yè)鏈昆稿、作業(yè)歸并。
? ? 作業(yè)鏈:該方法是將多種模式結(jié)合起來以解決復(fù)雜的息拜、多級的問題溉潭。作業(yè)鏈?zhǔn)潜姸啾容^難處理的過程中的一種净响,因?yàn)樗⒉皇谴蠖鄶?shù)MapReduce框架中包含的特性,MapReduce可以很好的處理單個(gè)MapReduce作業(yè)喳瓣,但在處理多級作業(yè)時(shí)則需要加入許多手工編碼馋贤,而且在操作上還需要考慮作業(yè)的各個(gè)階段如何處理任務(wù)失敗以及清理中間結(jié)果輸出的問題。
? ? 作業(yè)歸并:該方法是針對同一個(gè)MapReduce作業(yè)中執(zhí)行多個(gè)分析任務(wù)這類作業(yè)進(jìn)行優(yōu)化畏陕,已達(dá)到一石多鳥的目的配乓。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市惠毁,隨后出現(xiàn)的幾起案子犹芹,更是在濱河造成了極大的恐慌,老刑警劉巖鞠绰,帶你破解...
    沈念sama閱讀 212,686評論 6 492
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件腰埂,死亡現(xiàn)場離奇詭異,居然都是意外死亡蜈膨,警方通過查閱死者的電腦和手機(jī)屿笼,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 90,668評論 3 385
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來翁巍,“玉大人驴一,你說我怎么就攤上這事≡詈” “怎么了肝断?”我有些...
    開封第一講書人閱讀 158,160評論 0 348
  • 文/不壞的土叔 我叫張陵,是天一觀的道長例朱。 經(jīng)常有香客問我孝情,道長,這世上最難降的妖魔是什么洒嗤? 我笑而不...
    開封第一講書人閱讀 56,736評論 1 284
  • 正文 為了忘掉前任箫荡,我火速辦了婚禮,結(jié)果婚禮上渔隶,老公的妹妹穿的比我還像新娘羔挡。我一直安慰自己,他們只是感情好间唉,可當(dāng)我...
    茶點(diǎn)故事閱讀 65,847評論 6 386
  • 文/花漫 我一把揭開白布绞灼。 她就那樣靜靜地躺著,像睡著了一般呈野。 火紅的嫁衣襯著肌膚如雪低矮。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 50,043評論 1 291
  • 那天被冒,我揣著相機(jī)與錄音军掂,去河邊找鬼轮蜕。 笑死,一個(gè)胖子當(dāng)著我的面吹牛蝗锥,可吹牛的內(nèi)容都是我干的跃洛。 我是一名探鬼主播,決...
    沈念sama閱讀 39,129評論 3 410
  • 文/蒼蘭香墨 我猛地睜開眼终议,長吁一口氣:“原來是場噩夢啊……” “哼汇竭!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起穴张,我...
    開封第一講書人閱讀 37,872評論 0 268
  • 序言:老撾萬榮一對情侶失蹤细燎,失蹤者是張志新(化名)和其女友劉穎,沒想到半個(gè)月后陆馁,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體找颓,經(jīng)...
    沈念sama閱讀 44,318評論 1 303
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 36,645評論 2 327
  • 正文 我和宋清朗相戀三年叮贩,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片佛析。...
    茶點(diǎn)故事閱讀 38,777評論 1 341
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡益老,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出寸莫,到底是詐尸還是另有隱情捺萌,我是刑警寧澤,帶...
    沈念sama閱讀 34,470評論 4 333
  • 正文 年R本政府宣布膘茎,位于F島的核電站桃纯,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏披坏。R本人自食惡果不足惜态坦,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 40,126評論 3 317
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望棒拂。 院中可真熱鬧伞梯,春花似錦、人聲如沸帚屉。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,861評論 0 21
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽攻旦。三九已至喻旷,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間牢屋,已是汗流浹背且预。 一陣腳步聲響...
    開封第一講書人閱讀 32,095評論 1 267
  • 我被黑心中介騙來泰國打工牺陶, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人辣之。 一個(gè)月前我還...
    沈念sama閱讀 46,589評論 2 362
  • 正文 我出身青樓掰伸,卻偏偏與公主長得像,于是被迫代替她去往敵國和親怀估。 傳聞我的和親對象是個(gè)殘疾皇子狮鸭,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 43,687評論 2 351

推薦閱讀更多精彩內(nèi)容

  • 一:概要模式1:簡介概要設(shè)計(jì)模式更接近簡單的MR應(yīng)用,因?yàn)榛阪I將數(shù)據(jù)分組是MR范型的核心功能多搀,所有的鍵將被分組匯...
    Albert陳凱閱讀 1,841評論 0 0
  • Android 自定義View的各種姿勢1 Activity的顯示之ViewRootImpl詳解 Activity...
    passiontim閱讀 171,858評論 25 707
  • 每個(gè)人都有過焦慮的經(jīng)歷歧蕉,焦慮考試、焦慮工作康铭、焦慮減肥惯退、焦慮單身。 我們經(jīng)常說很焦慮从藤,仿佛焦慮是個(gè)可怕的洪水猛獸催跪。其...
    齊漾閱讀 175評論 0 8
  • 看見這個(gè)標(biāo)題就知道最近讀書少的可憐……今天終于有大塊的時(shí)間讀書了,好幸福夷野! 今天讀了精要主義的第一步 探索懊蒸,共5個(gè)...
    MissingbyLy閱讀 131評論 0 0
  • 今天給大家介紹一個(gè)時(shí)間管理方法,在今天的每日一問里悯搔,桃總問大家骑丸,有沒有過“夢想很飽滿,現(xiàn)實(shí)很骨感”的經(jīng)歷妒貌,島國的居...
    情感后花園閱讀 464評論 6 7