發(fā)簡(jiǎn)信
IP屬地：北京
-
Spark計(jì)算模型與I/O機(jī)制Part 1 1. Spark計(jì)算模型 1.1 Spark程序模型 首先通過(guò)一個(gè)簡(jiǎn)單的實(shí)例了解Spark的程序模型偎血。 1）SparkContex...
-
Spark1.5.0的安裝和部署
一混蔼、Spark集群部署 1润文、軟件版本 OS版本：Ubuntu 14.04 Hadoop版本：Hadoop 2.6.0 JDK版本：Jdk1.8....
-
白日夢(mèng)30篇——送給美麗的妳
婉柔綽約，婷婷玉立 柔情似水野建，如碧波蕩漾 甜美的微笑罗岖，月牙的慧眼 讓人停眸，讓人心動(dòng) 大家閨秀的氣質(zhì)诅蝶，小家碧玉的神色 讓人憐愛(ài)退个，讓人守護(hù) 靜待妳...
-
Yarn Client模式下啟動(dòng)Spark的配置問(wèn)題
由于YARN client模式對(duì)用戶不直接暴露用于提交YARN程序的輔助程序，因此許多參數(shù)是通過(guò)環(huán)境變量來(lái)設(shè)置的调炬，可以在spark-env.sh...
-
生如夏花の語(yǔ)錄
茶余飯后语盈，品一品茗，看一看書(shū)缰泡，是何等的幸事刀荒。特別喜歡泰戈?duì)柕摹渡缦幕ā罚罹鸵畹糜凶藨B(tài)棘钞，有溫度缠借，有力度。下面是我最喜歡的60句話宜猜。 1.時(shí)間...
-
Spark算子：統(tǒng)計(jì)RDD分區(qū)中的元素及數(shù)量
Spark RDD是被分區(qū)的泼返，在生成RDD時(shí)候，一般可以指定分區(qū)的數(shù)量姨拥，如果不指定分區(qū)數(shù)量绅喉，當(dāng)RDD從集合創(chuàng)建時(shí)候，則默認(rèn)為該程序所分配到的資源...
-
在Ubuntu?Server?14.04上安裝Ganglia?3.6.1監(jiān)測(cè)Spark?on?Yarn集群
關(guān)于 Ganglia 軟件垫毙，Ganglia是一個(gè)跨平臺(tái)可擴(kuò)展的霹疫，高性能計(jì)算系統(tǒng)下的分布式監(jiān)控系統(tǒng)，如集群和網(wǎng)格综芥。它是基于分層設(shè)計(jì)丽蝎，它使用廣泛的技...
個(gè)人介紹