240 發(fā)簡信
IP屬地:上海
  • 120
    大數(shù)據(jù)面試題整理 -- 實(shí)時(shí)計(jì)算部分

    1. zookeeper 在 kafka 中起到什么作用 Controller 選舉Controller 是一個(gè)特殊的 Broker, 其負(fù)責(zé)維護(hù)所有 Partition 的...

  • Spark Streaming 數(shù)據(jù)清理機(jī)制

    大家剛開始用Spark Streaming時(shí),心里肯定嘀咕蒋伦,對(duì)于一個(gè)7*24小時(shí)運(yùn)行的數(shù)據(jù)弓摘,cache住的RDD,broadcast 系統(tǒng)會(huì)幫忙自己清理掉么?還是說必須自己做...

  • 程序員的自我修養(yǎng)之路????

    這些年嚷炉,我工作上走過的路

    常常的渊啰,我會(huì)感恩于我所在的公司,讓自己經(jīng)歷了種種申屹。很多情況下绘证,公司的成長帶動(dòng)了自己的成長。完整的跟著公司經(jīng)歷大數(shù)據(jù)業(yè)務(wù)從無到有哗讥,從有到精嚷那,這種歷程就像美味的食物,吃過了才能真...

  • 19 Spark Streaming中空RDD的處理

    在Spark Streaming中浙踢,job不斷的產(chǎn)生,有時(shí)候會(huì)產(chǎn)生一些空RDD灿渴,而基于這些空RDD生成的job大多數(shù)情況下是沒必要提交到集群執(zhí)行的洛波。執(zhí)行沒有結(jié)果的job胰舆,就是...

  • Spark Streaming 數(shù)據(jù)產(chǎn)生與導(dǎo)入相關(guān)的內(nèi)存分析

    前言 我這篇文章會(huì)分幾個(gè)點(diǎn)來描述Spark Streaming 的Receiver在內(nèi)存方面的表現(xiàn)。 一個(gè)大致的數(shù)據(jù)接受流程 一些存儲(chǔ)結(jié)構(gòu)的介紹 哪些點(diǎn)可能導(dǎo)致內(nèi)存問題蹬挤,以及...

亚洲A日韩AV无卡,小受高潮白浆痉挛av免费观看,成人AV无码久久久久不卡网站,国产AV日韩精品