Hadoop

創(chuàng)始人:DougCutting 道格合呐≡壹梗卡丁

起源于Nutch(開源網(wǎng)絡(luò)搜索引擎)

鋪墊:谷歌兩篇論文1.GFS(分布式文件系統(tǒng)) 2.MapReduce

定義:開源的軟件平臺(tái),開源的軟件框架

Hadoop優(yōu)勢(shì)

?數(shù)據(jù)存儲(chǔ):數(shù)據(jù)塊多副本

?數(shù)據(jù)計(jì)算:重新調(diào)度計(jì)算

?擴(kuò)展性

?降低成本

Hadoop目前作用:

搜索引擎 百度拳氢,谷歌

大數(shù)據(jù)存儲(chǔ) 云存儲(chǔ)

大數(shù)據(jù)研究 數(shù)據(jù)分析 數(shù)據(jù)挖掘

科學(xué)研究 Strom Spark Flink

hadoop生態(tài)系統(tǒng)

hdfs 分布式文件系統(tǒng)

yarn 資源管理調(diào)度系統(tǒng)

MapReduce 分布式計(jì)算框架

storm 流式處理框架(實(shí)時(shí))

spark 基于內(nèi)存的計(jì)算框架

hbase實(shí)時(shí)分布式數(shù)據(jù)庫(kù)

Hive關(guān)系式數(shù)據(jù)庫(kù)

Pig腳本語(yǔ)言(過(guò)程)

Solr搜索

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末募逞,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子馋评,更是在濱河造成了極大的恐慌放接,老刑警劉巖,帶你破解...
    沈念sama閱讀 217,657評(píng)論 6 505
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件留特,死亡現(xiàn)場(chǎng)離奇詭異纠脾,居然都是意外死亡,警方通過(guò)查閱死者的電腦和手機(jī)蜕青,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,889評(píng)論 3 394
  • 文/潘曉璐 我一進(jìn)店門苟蹈,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái),“玉大人右核,你說(shuō)我怎么就攤上這事慧脱。” “怎么了蒙兰?”我有些...
    開封第一講書人閱讀 164,057評(píng)論 0 354
  • 文/不壞的土叔 我叫張陵磷瘤,是天一觀的道長(zhǎng)芒篷。 經(jīng)常有香客問(wèn)我,道長(zhǎng)采缚,這世上最難降的妖魔是什么针炉? 我笑而不...
    開封第一講書人閱讀 58,509評(píng)論 1 293
  • 正文 為了忘掉前任,我火速辦了婚禮扳抽,結(jié)果婚禮上篡帕,老公的妹妹穿的比我還像新娘。我一直安慰自己贸呢,他們只是感情好镰烧,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,562評(píng)論 6 392
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著楞陷,像睡著了一般怔鳖。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上固蛾,一...
    開封第一講書人閱讀 51,443評(píng)論 1 302
  • 那天结执,我揣著相機(jī)與錄音,去河邊找鬼艾凯。 笑死献幔,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的趾诗。 我是一名探鬼主播蜡感,決...
    沈念sama閱讀 40,251評(píng)論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼恃泪!你這毒婦竟也來(lái)了郑兴?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 39,129評(píng)論 0 276
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤悟泵,失蹤者是張志新(化名)和其女友劉穎杈笔,沒想到半個(gè)月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體糕非,經(jīng)...
    沈念sama閱讀 45,561評(píng)論 1 314
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡蒙具,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,779評(píng)論 3 335
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了朽肥。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片禁筏。...
    茶點(diǎn)故事閱讀 39,902評(píng)論 1 348
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖衡招,靈堂內(nèi)的尸體忽然破棺而出篱昔,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 35,621評(píng)論 5 345
  • 正文 年R本政府宣布州刽,位于F島的核電站空执,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏穗椅。R本人自食惡果不足惜辨绊,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,220評(píng)論 3 328
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望匹表。 院中可真熱鬧门坷,春花似錦、人聲如沸袍镀。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,838評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)苇羡。三九已至绸吸,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間宣虾,已是汗流浹背惯裕。 一陣腳步聲響...
    開封第一講書人閱讀 32,971評(píng)論 1 269
  • 我被黑心中介騙來(lái)泰國(guó)打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留绣硝,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 48,025評(píng)論 2 370
  • 正文 我出身青樓撑刺,卻偏偏與公主長(zhǎng)得像鹉胖,于是被迫代替她去往敵國(guó)和親。 傳聞我的和親對(duì)象是個(gè)殘疾皇子够傍,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,843評(píng)論 2 354

推薦閱讀更多精彩內(nèi)容