8篇文章 · 10042字 · 1人關(guān)注
-
8.Spark Sql定義 SparkSql是Apache Spark大數(shù)據(jù)框架的一部分，主要用于處理結(jié)構(gòu)化數(shù)據(jù)和對Spark數(shù)據(jù)執(zhí)行類sql的查詢泌辫，Spark為其提...
-
7.Spark StreamingSpark Streaming是Spark核心api的一個拓展随夸，可以實現(xiàn)高吞吐量/具備容錯機制的實時流數(shù)據(jù)的處理Spark Streaming ...
-
6.Spark的wordCount原理解析針對以下wordCount的實現(xiàn)原理以畫圖的方式進(jìn)行分析 代碼 圖解
-
5.Spark的wordCount（java/scala）
在代碼實現(xiàn)之前，先查看一下數(shù)據(jù)源是怎樣的 截取了文本的第一段震放，已經(jīng)對文本進(jìn)行預(yù)處理宾毒，以空格將單詞分割。 Java實現(xiàn) 輸出結(jié)果 Scala實現(xiàn) ...
-
4.Spark調(diào)優(yōu)在Spark中殿遂，每一個進(jìn)程包含一個executor對象诈铛，一個executor包含一個線程池乙各，每個線程執(zhí)行一個tasks 線程池的好處就在于省去了...
-
3.Spark CoreSpark是基于彈性分布式數(shù)據(jù)集（RDD）的模型，具有良好的通用性幢竹、容錯性與并行處理數(shù)據(jù)的能力那么什么是彈性分布式內(nèi)存呢耳峦？內(nèi)存即使再大也有放不下...
-
2.Spark與Hadoop的對比上一篇文章---Spark概述：http://www.reibang.com/p/8f48abff7a5b 這篇文章主要是與MapReduce...
-
1.Spark的概述Spark，是一種通用的大數(shù)據(jù)計算框架焕毫，正如傳統(tǒng)大數(shù)據(jù)技術(shù)Hadoop的MapReduce蹲坷、Hive引擎，以及Storm流式實時計算引擎...
