發(fā)簡(jiǎn)信
IP屬地：廣東
-
Hfile結(jié)構(gòu)Hfile結(jié)構(gòu) 文件主要分為四個(gè)部分：Scanned block section，Non-scanned block section，Openi...
-
HBase知識(shí)點(diǎn)介紹 HBase是一個(gè)構(gòu)建在HDFS上的分布式列存儲(chǔ)系統(tǒng)股冗； HBase是基于Google BigTable模型開發(fā)的汽纠，典型的key/value系...
-
Hive知識(shí)點(diǎn)hive介紹 Hive通常意義上來(lái)說(shuō)，是把一個(gè)SQL轉(zhuǎn)化成一個(gè)分布式作業(yè)丧叽，如MapReduce骚灸，Spark或者Tez。無(wú)論Hive的底層執(zhí)行框架...
-
Yarn知識(shí)Year的資源管理模型 在實(shí)際系統(tǒng)中驴一，資源本身是多維度的休雌，包括CPU、內(nèi)存肝断、網(wǎng)絡(luò)I/O和磁盤I/O等杈曲，因此，如果想精確控制資源分配胸懈，不能再有sl...
-
MapReduce 知識(shí)參與mapreduce作業(yè)執(zhí)行涉及4個(gè)獨(dú)立的實(shí)體： 客戶端（client）提交MapReduce作業(yè)JobTracker1.作業(yè)調(diào)度：將一個(gè)作業(yè)...
-
HDFS 2.0 的 HA 實(shí)現(xiàn)HDFS 2.0 的 HA 實(shí)現(xiàn) Active NameNode 和 Standby NameNode：兩臺(tái) NameNode 形成互備担扑，一臺(tái)處...
-
HDFS知識(shí)hdfs架構(gòu)設(shè)計(jì) HDFS主要由3個(gè)組件構(gòu)成，分別是NameNode趣钱、SecondaryNameNode和DataNode涌献，HSFS是以mast...
-
Storm知識(shí)點(diǎn)1.1 簡(jiǎn)單介紹 實(shí)時(shí)處理Stream流的能力，有容錯(cuò)性首有，保證性處理機(jī)制燕垃。對(duì)于輸入數(shù)據(jù)，支持消息隊(duì)列井联，像RabbitMQ, JMS, Kafka...
-
storm kafka
1.1 KafkaSpout流程 建立zookeeper客戶端卜壕，在zookeeper "borkers/topics/" + _topic + ...