小癲僧 - 簡書

發(fā)簡信

小癲僧

0
關(guān)注
4
粉絲
7
文章
25472

字?jǐn)?shù)
8

收獲喜歡

IP屬地：北京

小癲僧

天池Python學(xué)習(xí)小組（1）
一 print() 函數(shù) print(*objects, sep=' ', end='\n', file=sys.stdout, flush=False) 將對象以字符串表示...

246 0 0
小癲僧

831191fa62a2
寫了 0 字绵跷，被 26042 人關(guān)注碾局，獲得了 530 個喜歡

小癲僧

ce6c3d7bcac1
寫了 0 字，被 119177 人關(guān)注像啼，獲得了 8336 個喜歡
小癲僧

劉曠
寫了 0 字，被 324786 人關(guān)注此疹，獲得了 3601 個喜歡

以禪道參悟互聯(lián)網(wǎng)遮婶、微信公眾號：liukuang110
小癲僧

智科技
寫了 0 字，被 129220 人關(guān)注臀防，獲得了 1230 個喜歡

數(shù)碼家電行業(yè)資深從業(yè)者边败，產(chǎn)業(yè)觀察家，TMT分析師放闺。長期從事新零售缕坎、新消費、物聯(lián)網(wǎng)谜叹、大數(shù)據(jù)匾寝、大金融、智能硬件荷腊、AI、智能制造領(lǐng)域的追蹤報道及研究女仰。
小癲僧

spark 面試題（1）
1.spark中的RDD是什么乔外，有哪些特性？答：RDD（Resilient Distributed Dataset）叫做分布式數(shù)據(jù)集一罩，是spark中最基本的數(shù)據(jù)抽象，它代表...

1393 0 1
小癲僧

spark 面試題（2）
33.選擇題二、選擇題 1. Spark 的四大組件下面哪個不是 (D ) A.Spark Streaming B. Mlib C Graphx D.Spark R 2...

3940 0 1

小癲僧

如何關(guān)閉 sparkstreaming 任務(wù)
因為Spark Streaming流程序比較特殊暖夭，所以不能直接執(zhí)行kill -9 這種暴力方式停掉锹杈，如果使用這種方式停程序迈着，那么就有可能丟失數(shù)據(jù)或者重復(fù)消費數(shù)據(jù)。為什么呢裕菠？...

2307 0 0
小癲僧

Spark使用parquet文件存儲格式能帶來哪些好處
1.Spark使用parquet文件存儲格式能帶來哪些好處旧烧？ 1) 如果說HDFS 是大數(shù)據(jù)時代分布式文件系統(tǒng)首選標(biāo)準(zhǔn)画髓，那么parquet則是整個大數(shù)據(jù)時代文件存儲格式實時首...

2503 0 0
小癲僧

Hive 處理數(shù)據(jù)傾斜
在做Shuffle階段的優(yōu)化過程中夺谁，遇到了數(shù)據(jù)傾斜的問題肉微，造成了對一些情況下優(yōu)化效果不明顯。主要是因為在Job完成后的所得到的 Counters是整個Job的總和碉纳，優(yōu)化是基于...

732 0 1
小癲僧

Hive 如何使用mapjoin
MapJoin是Hive的一種優(yōu)化操作奴愉，其適用于小表JOIN大表的場景，由于表的JOIN操作是在Map端且在內(nèi)存進行的躁劣，所以其并不需要啟動Reduce任務(wù)也就不需要經(jīng)過shu...

27503 0 5
小癲僧

@IT·互聯(lián)網(wǎng)
若錦編熙宇，68419 篇文章鳖擒，2648544 人關(guān)注

Hi烫止，很高興在@IT·互聯(lián)網(wǎng)專題遇見你。收錄范圍：收錄IT&互聯(lián)網(wǎng)行業(yè)觀察與思考馆蠕，數(shù)碼產(chǎn)品極客體驗分析等類型文章投稿須知：http://www.reibang.com/p/4edc76104c27 專題主編：@若錦 http://www.reibang.com/u/e4c63b354a77 官方社群：可聯(lián)系添加 @若錦加入專題官方社群交流惊奇、學(xué)習(xí)，添加時備注簡書ID播赁。

小癲僧