HDFS:分布式文件系統(tǒng)
MapReduce:分布式并行編程模型
YARN:資源管理和調度器
Tez:運行在YARN之上的下一代Hadoop查詢處理框架
Hive:Hadoop上的數據倉庫
HBase:Hadoop上的非關系型的分布式數據庫
Pig:一個基于Hadoop的大規(guī)模數據分析平臺娩怎,提供類似SQL的查詢語言Pig Latin
Sqoop:用于在Hadoop與傳統(tǒng)數據庫之間進行數據傳遞
Oozie:Hadoop上的工作流管理系統(tǒng)
Zookeeper: 提供分布式協(xié)調一致性服務
Storm:流計算框架
Flume: 一個高可用的,高可靠的胰柑,分布式的海量日志采集截亦、聚合和傳輸的系統(tǒng)
Ambari: Hadoop快速部署工具爬泥,支持Apache Hadoop集群的供應、管理和監(jiān)控
Kafka:一種高吞吐量的分布式發(fā)布訂閱消息系統(tǒng)崩瓤,可以處理消費者規(guī)模的網站中的所有動作流數據
Spark: 類似于Hadoop MapReduce的通用并行框架
簡單的介紹Hadoop的基本結構和其組件功能
最后編輯于 :
?著作權歸作者所有,轉載或內容合作請聯系作者
- 文/潘曉璐 我一進店門信粮,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人趁啸,你說我怎么就攤上這事强缘。” “怎么了不傅?”我有些...
- 文/不壞的土叔 我叫張陵旅掂,是天一觀的道長。 經常有香客問我蛤签,道長辞友,這世上最難降的妖魔是什么栅哀? 我笑而不...
- 正文 為了忘掉前任震肮,我火速辦了婚禮,結果婚禮上留拾,老公的妹妹穿的比我還像新娘戳晌。我一直安慰自己,他們只是感情好痴柔,可當我...
- 文/花漫 我一把揭開白布沦偎。 她就那樣靜靜地躺著,像睡著了一般咳蔚。 火紅的嫁衣襯著肌膚如雪豪嚎。 梳的紋絲不亂的頭發(fā)上,一...
- 文/蒼蘭香墨 我猛地睜開眼革为,長吁一口氣:“原來是場噩夢啊……” “哼扭粱!你這毒婦竟也來了?” 一聲冷哼從身側響起震檩,我...
- 正文 年R本政府宣布,位于F島的核電站掷倔,受9級特大地震影響眉孩,放射性物質發(fā)生泄漏。R本人自食惡果不足惜勒葱,卻給世界環(huán)境...
- 文/蒙蒙 一浪汪、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧凛虽,春花似錦死遭、人聲如沸。這莊子的主人今日做“春日...
- 文/蒼蘭香墨 我抬頭看了看天上的太陽拧烦。三九已至,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間核蘸,已是汗流浹背门躯。 一陣腳步聲響...
推薦閱讀更多精彩內容
- 史上最全的“大數據”學習資源(上)-博客-云棲社區(qū)-阿里云https://yq.aliyun.com/articl...
- http://geek.csdn.net/news/detail/210469http://www.36dsj.c...
- 作者:Anil Madan 譯者:張玉宏 文源:LinkeDin 轉自:CSDN PayPal高級工程總監(jiān)Anil...
- 本文涉及到的所有模塊猾瘸,都是屬于Apache組織界赔,不包括其他第三方的模塊。 核心模塊: Hadoop Common:...