問題 某一天業(yè)務來找我,反映發(fā)數(shù)據(jù)到某一個Kafka集群特別慢赶熟。并且他們提供了一份自己的測試結(jié)果瑰妄,結(jié)果顯示發(fā)送數(shù)據(jù)到Kafka集群A的平均響應延遲在10ms以內(nèi),但是發(fā)送到K...
對于經(jīng)常使用 Spark 的人來說映砖,如何設置 driver 或 executor 的內(nèi)存大小间坐,如何盡量減少 GC 相信不會陌生。要做好這兩點邑退,除了 Spark 知識的掌握外竹宋,...
Spark 1.3及其前的版本 你的一個 spark streaming application 已經(jīng)好好運行了一段時間了,這個時候你因為某種原因要停止它瓜饥。你應該怎么做逝撬?直接...
一個 Streaming Application 往往需要7*24不間斷的跑,所以需要有抵御意外的能力(比如機器或者系統(tǒng)掛掉乓土,JVM crash等)宪潮。為了讓這成為可能,Spa...
螞蟻金服招聘中間件開發(fā)工程師/技術專家趣苏,歡迎大家的簡歷哦:khotyn.huangt@alibaba-inc.com 今天又聽了 Jetbrains 首席布道師 Hadi 的...
說逆天似乎有些標題黨了,但確實Mac上有很多小眾但卻讓人無法自拔的工具食磕,自己平時用的多尽棕,整理了一些,希望有幫助:) 這次只分四部分:閱讀類彬伦、工具類滔悉、圖片類、筆記類单绑。 還是和以...
原文鏈接:『 Spark 』5. 這些年,你不能錯過的 spark 學習資源 寫在前面 本系列是綜合了自己在學習spark過程中的理解記錄 + 對參考文章中的一些理解 + 個...
原創(chuàng)文章搂橙,轉(zhuǎn)載請注明:轉(zhuǎn)載自聽風居士博客(http://www.reibang.com/users/4435a13863fb/timeline) Spark streamin...
題記: 這是我的第一篇技術博文歉提,寫得不好請多提意見。然后,感謝張志斌老師苔巨,畢業(yè)之前張老師幫助我解一些“神奇的bug”版扩,現(xiàn)在畢業(yè)一個月,我終于自己開始解自己認為“神奇的bug”...