發(fā)簡(jiǎn)信
IP屬地：天津
-
Spark源碼分析（3） RDD 的轉(zhuǎn)換如上圖非剃，外圈是 RDD 的轉(zhuǎn)換阱当，內(nèi)圈紅色 RDD 是轉(zhuǎn)換產(chǎn)生的新 RDD鞍陨。按顏色區(qū)分轉(zhuǎn)換： 綠色是單 RDD 窄依賴轉(zhuǎn)換 黑色是多 RDD 窄依...
-
Spark 源碼分析（2）RDD 的依賴源碼 Dependency代碼主要在一個(gè)源文件中：core/Dependency代碼中有5個(gè)類(lèi)窗宇。除此以外在 core/rdd/Partition...
-
Spark源碼分析（1） RDD是什么
RDD是Spark的基礎(chǔ)，是對(duì)大數(shù)據(jù)的抽象详拙，所以先破解Spark叹阔，首先從RDD開(kāi)始。 RDD 是什么势篡？有什么特點(diǎn)翩肌？ RDD 包含什么？ RDD ...