發(fā)簡(jiǎn)信
IP屬地：北京
-
對(duì)Spark的一些誤解[翻譯自Spark Misconceptions]
原文鏈接<https://0x0fff.com/spark-misconceptions/> Spark Misconceptions 目前，媒...
-
sudo apt-get:command not found Fix - Ubuntu 18.04
apt/apt-get command找不到-問(wèn)題修復(fù) 最近使用ubuntu 18.04時(shí)眶俩，因?yàn)榘凑漳承┸浖鼘?dǎo)致apt/apt-get命令找不...
-
Spark-Task
Spark Task Define of Task Task是Spark中執(zhí)行具體計(jì)算任務(wù)的基本單位(a unit of execution)，...
-
Spark-Mesos架構(gòu)圖Spark Mesos 架構(gòu)圖 Apache Mesos采用Master/Slave架構(gòu)霹购，主要由Mesos Master坞嘀、Mesos Slave...
-
spark-local模式詳解
spark-local 詳解 Spark的Local模式是在本地啟動(dòng)多個(gè)Threads(線程)來(lái)模擬分布式運(yùn)行模式吭服，每個(gè)Thread代表一個(gè)wo...
-
Intel-BigDL 訓(xùn)練過(guò)程(DistriOptimize)詳解Intel-BigDL DistriOptimizer內(nèi)部過(guò)程分析 Intel深度學(xué)習(xí)庫(kù)BigDL在分布式模式下進(jìn)行Model的訓(xùn)練是非常簡(jiǎn)單的...
-
理解Spark中Job-Stage-Task之間的關(guān)系Spark-Job-Stage-Task之間的關(guān)系 基本概念 在開(kāi)始之前需要先了解Spark中Application咱圆，Job，Stage等基本概...
-
JVM類(lèi)加載機(jī)制虛擬機(jī)類(lèi)加載機(jī)制 類(lèi)從被加載到虛擬機(jī)內(nèi)存開(kāi)始到卸載出內(nèi)存為止羽利，整個(gè)生命周期包含以下7個(gè)階段，其中驗(yàn)證刊懈，準(zhǔn)備这弧，解析3個(gè)階段被統(tǒng)稱(chēng)為連接。7個(gè)階段中...
-
Spark RDD詳解
SparkRDD 在Spark中RDD具有5個(gè)主要的屬性： A list of partitions A function(compute) t...