發(fā)簡信
IP屬地：浙江
-
-
大學是學的軟件工程，研究生也是軟件工程上沐，寫過大數(shù)據(jù)胯努，玩過Java，手撕過python坯苹，寫過爬蟲 搞過聊天機器人隆檀。
-
Spark（四十一）數(shù)據(jù)傾斜解決方案之sample采樣傾斜key進行兩次join一、背景 這個方案的實現(xiàn)思路，跟大家解析一下：其實關鍵之處在于恐仑，將發(fā)生數(shù)據(jù)傾斜的key泉坐，單獨拉出來，放到一個RDD中去裳仆；就用這個原本會傾斜的key RDD跟其他RDD腕让，單獨去...
-
Spark 內存管理詳解Spark 作為一個基于內存的分布式計算引擎，其內存管理模塊在整個系統(tǒng)中扮演著非常重要的角色歧斟。理解 Spark 內存管理的基本原理纯丸，有助于更好地開發(fā) Spark 應用程序和進...
-
-
此簡書用來發(fā)布Spark+AI的深夜學堂勾徽，每夜一更新滑凉！夜空中最亮的星：Spark！
-
新博客地址： <a href="https://links.jianshu.com/go?to=https%3A%2F%2Fwww.zhihu.com%2Fpeople%2Fallwefantasy" target="_blank">https://www.zhihu.com/people/allwefantasy</a>
-
Spark 2.0 Structured Streaming 分析前言 Spark 2.0 將流式計算也統(tǒng)一到DataFrame里去了，提出了Structured Streaming的概念吹由，將數(shù)據(jù)源映射為一張無線長度的表若未，同時將流式計算的結...
-
-
Java大數(shù)據(jù)開發(fā)的那些事
-
收集與互聯(lián)網(wǎng)、大數(shù)據(jù)相關的學習資料磕道、文章供屉，包括各種編程技巧，統(tǒng)計分析知識等等溺蕉。
-
玩轉大數(shù)據(jù)
-
-
喜歡沒事發(fā)發(fā)牢騷的老程序猿一枚
-
-
