kafka 是一個分布式的,分區(qū)的躲雅,復制的提交日志服務 分布式:kafka可以提供集群服務喊巍,它是由一個或者多個broker組成屠缭,每個broker...
spark 部署有幾種模式spark 可分為單機模式和集群模式集群模式又可分為standalone獨立集群模式,yarn 集群模式和mesos集...
本文主要講述了spark對hbase進行獨寫的兩種方式崭参,這兩種方式分別為:1.利用spark提供的 newAPIHadoopRDD api 對h...
hdfs 集群為我們提供分布式的存儲資源呵曹,hdfs 主要由namenode 和 datanode 組件構(gòu)成,文件在hdfs中是以塊來存儲的何暮,根據(jù)...
mr 的設計思想是分而治之奄喂,它分為兩個階段,分別為map階段和reduce階段海洼,map階段體現(xiàn)了分的思想跨新,將一個復雜的任務分解成若干個簡單的任務...
hadoop hdfs 被設計用作海量數(shù)據(jù)存儲,適合存儲大文件贰军,文件在hdfs中是以block的形式存儲的玻蝌,在hadoop 1.x中蟹肘,hdfs ...
hbase 寫入數(shù)據(jù)有以下三種方式: 1.利用hbase提供的api寫入 2.通過mr任務將數(shù)據(jù)寫入 3.通過bulkload工具將數(shù)據(jù)寫入 前...
hbase 寫入數(shù)據(jù)有以下三種方式: 1.利用hbase提供的api寫入 2.通過mr任務將數(shù)據(jù)寫入 3.通過bulkload工具將數(shù)據(jù)寫入 前...
筆者最近學習jvm 的內(nèi)存模型,這里根據(jù)下面幾個模塊來做個總結(jié): 1.jvm的內(nèi)存模型 2.jvm gc原理 jvm的內(nèi)存模型 jvm 的內(nèi)存模...