發(fā)簡信
IP屬地：上海
-
大數(shù)據(jù)面試題整理 -- 實(shí)時(shí)計(jì)算部分1. zookeeper 在 kafka 中起到什么作用 Controller 選舉Controller 是一個(gè)特殊的 Broker, 其負(fù)責(zé)維...
-
大數(shù)據(jù)面試題整理 -- hadoop 部分(2)11. mapreduce 的 shuffle 調(diào)優(yōu)參數(shù) 具體參考：MapReduce Shuffle性能調(diào)優(yōu) Map 端優(yōu)化參數(shù) Reduce...
-
大數(shù)據(jù)面試題整理 -- hadoop 部分(1)
一幸缕、 hadoop 離線部分 1. hadoop HA 集群都要啟動(dòng)哪些進(jìn)程涵亏，他們的作用是什么 Namenode：(1) 維護(hù)文件系統(tǒng)的目錄樹，...
-
Spark SQL 學(xué)習(xí)筆記
1.什么是 Spark SQL Spark SQL是Spark用來處理結(jié)構(gòu)化數(shù)據(jù)的一個(gè)模塊惹挟，它提供了一個(gè)編程抽象叫做DataFrame并且作為分...
-
Spark 基礎(chǔ)知識(shí)
一茄螃、Spark 集群安裝 修改 spark-env.sh 文件，在該配置文件中添加如下配置 修改 slaves 文件连锯，加入節(jié)點(diǎn)归苍。 發(fā)送到其他機(jī)器...
-
Akka 編程
背景介紹：學(xué)會(huì) akka 編程用狱，自己編寫一個(gè)分布式的 RPC 通信框架，為學(xué)習(xí) spark 的源碼做準(zhǔn)備拼弃。 一夏伊、Akka 簡介 Akka 基于 ...
-
Actor 編程
注：我們現(xiàn)在學(xué)的Scala Actor是scala 2.10.x版本及以前版本的Actor。Scala在2.11.x版本中將Akka加入其中肴敛，作...
-
Scala 學(xué)習(xí)筆記
一署海、Scala 基礎(chǔ) 變量 定義方法和函數(shù) 定義方法： 定義函數(shù)： 3. apply 方法 通常我們會(huì)在類的伴生對象中定義apply方法，當(dāng)遇到...
-
Java 基礎(chǔ)面試寶典(自己總結(jié))
一医男、多線程 說明下線程的狀態(tài) java中的線程一共有 5 種狀態(tài)砸狞。 NEW：這種情況指的是，通過 New 關(guān)鍵字創(chuàng)建了 Thread 類（或其子...