Executor內(nèi)存使用 因此Executor的內(nèi)存主要分為三塊： 第一塊是讓task執(zhí)行我們自己編寫的代碼時使用，默認是占Executor總內(nèi)存的20%； 第二塊是讓tas...
發(fā)簡信
IP屬地：寧夏
-
Spark 資源調(diào)優(yōu) -
Spark Repartition 使用
看到一些同學(xué)的Spark代碼中包含了很多repartition的操作驻粟，有一些不是很合理势誊，非但沒有增加處理的效率，反而降低了性能赊时。這里做一個介紹误阻。 repartition 從字...
-
因用了Insert into select語句，同事被開除了钙勃！
來自：掘金（作者：不一樣的科技宅）原文鏈接：https://juejin.im/post/5e670f0151882549274a65ef 前言 Insert into se...
-
使用marven實現(xiàn)java和scala的互相調(diào)用
1. Java調(diào)用Scala類 整個工程的目錄結(jié)構(gòu)如下： App.java為主程序蛛碌，由Java語言實現(xiàn)，MyScala.scala為被調(diào)用的類辖源，由Scala語言實現(xiàn)蔚携。 App...
-
Eclipse中使用gitEclipse從LUNA版本開始默認支持了GIT客戶端，可以在導(dǎo)航菜單中windows --> preferences搜索git查看git相關(guān)配置克饶。Eclipse中對于git...
-
Java漢字轉(zhuǎn)拼音pinyin4j用法
一酝蜒、工具介紹 pinyin4j 是一個支持將簡體和繁體中文轉(zhuǎn)換到成拼音的Java開源類庫； 1. 功能 支持同一漢字有多個發(fā)音 還支持拼音的格式化輸出矾湃，比如第幾聲之類的亡脑， 同...
-
Python優(yōu)雅的操作Exchange郵箱——exchangelib模塊使用介紹
最近想把公司郵箱的附件給下載下來，附件好多都是我整理的報告和文檔邀跃，一個個去下載明顯太傻霉咨，碰到這種問題第一個想到的就是Python啦 需求很簡單，只需要登錄自己的Exchang...
-
關(guān)于Dashboard設(shè)計的總結(jié)作為一個TOB產(chǎn)品的設(shè)計師拍屑，一定設(shè)計過儀表盤（Dashboard）無論是哪一種數(shù)據(jù)產(chǎn)品途戒，儀表盤（Dashboard）都是最核心的功能。他是用戶接觸數(shù)據(jù)的第一個頁面僵驰，相當于數(shù)據(jù)...
