在YARN源碼解析(5)-MapReduce中秸弛，在數(shù)據(jù)本地節(jié)點分配Task是如何做到的忠烛？中阎毅，我們介紹了MapReduce如何在block所在的H...

這本書中来涨，主要介紹了黑天鵝事件的產(chǎn)生晒夹，以及它的原理． 其實黑天鵝事件佳镜，并不是每件會改變歷史進(jìn)程的大事僚稿，才叫黑天鵝事件．而是，每件我們個人沒有預(yù)測...

今日在家無聊蟀伸，翻了一遍《如何閱讀一本書》． 這本書早就購來了蚀同，但是一直沒有動過．最近從某個博客上看到了此書中的只言片語，感覺實在是醍醐灌頂啊掏，于是...

前幾天蠢络，在看Hadoop User Email List的時候，發(fā)現(xiàn)了一個關(guān)于HDFS Centrailzed Cache的問題迟蜜。剛好我又不熟悉...

在我們編寫Scala代碼的時候刹孔，由于ListBuffer方便的特性，所以經(jīng)常會使用ListBuffer娜睛。過去也一直沒有什么問題髓霞。 但是呢，最近在...

在這篇文章中畦戒，我們來探究一下Scala HashMap.put(k, v)以及Java HashMap.put(k, v)的性能方库。 具體代碼沒看...

在上一篇文章Spark內(nèi)存模型初探(1)-Storage/Execution Memory的使用中，我們初步解析了一下Storage/Execu...

過去障斋，我翻譯了幾篇關(guān)于Spark內(nèi)存模型的文章纵潦。翻譯完以后，我覺得我對Spark內(nèi)存模型已經(jīng)夠理解了垃环，可是邀层，紙上得來終覺淺，實際跑Spark任務(wù)...

筆者最近在測試Spark的內(nèi)存模型晴裹，測到ExecutionMemory的使用時被济，老是沒發(fā)現(xiàn)分配任何ExecutionMemory。懷疑由于是在同...