發(fā)簡信
IP屬地：北京
-
對Spark的一些誤解[翻譯自Spark Misconceptions]
原文鏈接<https://0x0fff.com/spark-misconceptions/> Spark Misconceptions 目前，媒...
-
sudo apt-get:command not found Fix - Ubuntu 18.04
apt/apt-get command找不到-問題修復(fù) 最近使用ubuntu 18.04時跃洛，因為按照某些軟件包導(dǎo)致apt/apt-get命令找不...
-
Spark-Task
Spark Task Define of Task Task是Spark中執(zhí)行具體計算任務(wù)的基本單位(a unit of execution)仇矾，...
-
Spark-Mesos架構(gòu)圖Spark Mesos 架構(gòu)圖 Apache Mesos采用Master/Slave架構(gòu)胸囱，主要由Mesos Master错森、Mesos Slave...
-
spark-local模式詳解
spark-local 詳解 Spark的Local模式是在本地啟動多個Threads(線程)來模擬分布式運行模式本鸣，每個Thread代表一個wo...
-
Intel-BigDL 訓(xùn)練過程(DistriOptimize)詳解Intel-BigDL DistriOptimizer內(nèi)部過程分析 Intel深度學(xué)習(xí)庫BigDL在分布式模式下進(jìn)行Model的訓(xùn)練是非常簡單的...
-
理解Spark中Job-Stage-Task之間的關(guān)系Spark-Job-Stage-Task之間的關(guān)系 基本概念 在開始之前需要先了解Spark中Application樱蛤，Job疙挺，Stage等基本概...
-
JVM類加載機(jī)制虛擬機(jī)類加載機(jī)制 類從被加載到虛擬機(jī)內(nèi)存開始到卸載出內(nèi)存為止扛邑，整個生命周期包含以下7個階段，其中驗證铐然，準(zhǔn)備蔬崩，解析3個階段被統(tǒng)稱為連接。7個階段中...
-
Spark RDD詳解
SparkRDD 在Spark中RDD具有5個主要的屬性： A list of partitions A function(compute) t...