分布式系統(tǒng)里的Shuffle 階段往往是非常復(fù)雜的，而且分支條件也多限书，我只能按著我關(guān)注的線去描述器钟。肯定會有不少謬誤之處，我會根據(jù)自己理解的深入，不斷更新這篇文章。 前言 借用...
發(fā)簡信
IP屬地：北京
-
Spark Sort Based Shuffle內(nèi)存分析
-
技術(shù)合伙人之殤
最近幾年凿蒜，有兩件事情讓做技術(shù)的人價值呈現(xiàn)幾何倍的增長： 移動互聯(lián)網(wǎng)時代崛起。那個時候人人似乎都想做APP開發(fā)招驴，因為來錢快篙程，也迎來了個人開發(fā)者的一個黃金期。 大數(shù)據(jù)的崛起别厘。如果...