JMM JMM(Java內(nèi)存模型揩懒，Java Memory Model)本身是一種抽象的概念痊土，并不真實(shí)存在塞帐，它描述的是一組規(guī)則或規(guī)范单旁，通過規(guī)范定制...

synchronized synchroized 是一個(gè)重量級鎖沪羔，但是現(xiàn)在經(jīng)過優(yōu)化后，引入了自旋鎖象浑、鎖消除蔫饰、鎖粗化、偏向鎖愉豺、輕量級鎖篓吁、重量級鎖后...

Spark GraphX概述 GraphX是Spark的一個(gè)組件，專門用來表示圖以及進(jìn)行圖的并行計(jì)算蚪拦。GraphX通過重新定義了圖的抽象概念來拓...

Spark Streaming 隨著大數(shù)據(jù)技術(shù)的不斷發(fā)展杖剪，人們對于大數(shù)據(jù)的實(shí)時(shí)性處理要求也在不斷提高，傳統(tǒng) 的 MapReduce 等批處理框架...

Spark SQL Spark SQL的概述 Hive的誕生驰贷，主要是因?yàn)殚_發(fā)MapReduce程序?qū)?Java 要求比較高盛嘿，為了讓他們能夠操作H...

序列化 在實(shí)際開發(fā)中會(huì)自定義一些對RDD的操作，此時(shí)需要注意的是： 初始化工作在Driver端進(jìn)行的 實(shí)際運(yùn)行程序是在Executor端進(jìn)行的 ...

RDD編程 什么是RDD RDD是Spark的基石括袒，是實(shí)現(xiàn)Spark數(shù)據(jù)處理的核心抽象次兆。RDD是一個(gè)抽象類，它代表一個(gè)不可變锹锰、可分區(qū)芥炭、里面元素可...

前言 內(nèi)容： MapReduce狈邑、Spark、Flink（實(shí)時(shí)）=> 3代計(jì)算引擎蚤认，昨天、今天糕伐、未來 MapReduce砰琢、Spark：類MR引擎...

隱式機(jī)制及Akka 隱式轉(zhuǎn)換 隱式轉(zhuǎn)換和隱式參數(shù)時(shí)Scala中兩個(gè)非常強(qiáng)大的功能，利用隱式轉(zhuǎn)換和隱式參數(shù)良瞧，可以提供類庫陪汽，對類庫的使用者隱匿掉具體...