發(fā)簡信
IP屬地：廣東
-
-
想問一下 博主 那個(gè)shuffle read 和shuffle write 很大超過1G腫么辦呢
Spark Shuffle Write 和Read
本文基于spark源碼2.11 1. 前言 shuffle是spark job中一個(gè)重要的階段，發(fā)生在map和reduce之間周瞎，涉及到map到reduce之間的數(shù)據(jù)的移動(dòng)，以...
-
-
Spark Shuffle Write 和Read本文基于spark源碼2.11 1. 前言 shuffle是spark job中一個(gè)重要的階段泻肯，發(fā)生在map和reduce之間，涉及到map到reduce之間的數(shù)據(jù)的移動(dòng)慰照，以...
-
滌生毒租，姓名殷琦稚铣，目前就職于某大型互聯(lián)網(wǎng)公司基礎(chǔ)架構(gòu)部，主要負(fù)責(zé)微服務(wù)框架、服務(wù)治理榛泛、Serverless 相關(guān)工作蝌蹂。 《高可用可伸縮微服務(wù)架構(gòu)：基于Dubbo、Spring Cloud和Service Mesh》的作者之一曹锨，《Knative 入門》圖書翻譯之一孤个。
-
