發(fā)簡信
IP屬地：北京
-
Spark計算模型與I/O機制Part 1 1. Spark計算模型 1.1 Spark程序模型 首先通過一個簡單的實例了解Spark的程序模型。 1）SparkContex...
-
Spark1.5.0的安裝和部署
一、Spark集群部署 1含衔、軟件版本 OS版本：Ubuntu 14.04 Hadoop版本：Hadoop 2.6.0 JDK版本：Jdk1.8....
-
白日夢30篇——送給美麗的妳
婉柔綽約，婷婷玉立 柔情似水瘤礁，如碧波蕩漾 甜美的微笑寺酪，月牙的慧眼 讓人停眸，讓人心動 大家閨秀的氣質脚乡，小家碧玉的神色 讓人憐愛蜒滩，讓人守護 靜待妳...
-
Yarn Client模式下啟動Spark的配置問題
由于YARN client模式對用戶不直接暴露用于提交YARN程序的輔助程序滨达，因此許多參數是通過環(huán)境變量來設置的，可以在spark-env.sh...
-
生如夏花の語錄
茶余飯后俯艰，品一品茗捡遍，看一看書，是何等的幸事竹握。特別喜歡泰戈爾的《生如夏花》画株，活就要活得有姿態(tài)，有溫度啦辐，有力度谓传。下面是我最喜歡的60句話。 1.時間...
-
Spark算子：統(tǒng)計RDD分區(qū)中的元素及數量
Spark RDD是被分區(qū)的芹关，在生成RDD時候续挟，一般可以指定分區(qū)的數量，如果不指定分區(qū)數量侥衬，當RDD從集合創(chuàng)建時候诗祸，則默認為該程序所分配到的資源...
-
在Ubuntu?Server?14.04上安裝Ganglia?3.6.1監(jiān)測Spark?on?Yarn集群
關于 Ganglia 軟件，Ganglia是一個跨平臺可擴展的轴总，高性能計算系統(tǒng)下的分布式監(jiān)控系統(tǒng)直颅，如集群和網格。它是基于分層設計怀樟，它使用廣泛的技...