發(fā)簡信
IP屬地：山東
-
2020-06-18
1.自我介紹2.HBase1.compaction2.列族和HFile3.何時(shí)用hdfs何時(shí)用hbase4.meta表3.hive1.內(nèi)部表外部...
-
Future的使用
菜單新建打開已保存另存為導(dǎo)出打印主題偏好設(shè)置關(guān)于關(guān)閉Future的使用 get(long timeout, TimeUnit unit)pack...
-
yarn的執(zhí)行架構(gòu)
1.Client 提交一個(gè)job2.ResourceManager分配資源，在NodeManager上啟動(dòng)AppMaster3.AppMaste...
-
spark 運(yùn)行架構(gòu)
1.為應(yīng)用構(gòu)建基本運(yùn)行環(huán)境律罢，Driver 創(chuàng)建SparkContext進(jìn)行資源的申請(qǐng)媚狰，任務(wù)的分配型檀，監(jiān)控憎妙。2.ClusterManager為Exe...
-
spark core
fastdisk 10xmemory 100x easycodeinteractive shell unified stackbatchstre...
-
RDD五大特性
1. a list of partitions 2. a function for computing each split 3. a list...
-
sparkcore進(jìn)行wordcount詞頻統(tǒng)計(jì)
準(zhǔn)備一份數(shù)據(jù)/home/admin/data/helloworld.txt 按照詞頻排序
-
sparkcore的join
先準(zhǔn)備兩個(gè)rdd數(shù)據(jù) 1.a join b得到的結(jié)果 2.a leftOuterJoin b得到的結(jié)果 3.a rightOutJoin b得到...