什么是唯一一次 唯一一次，也叫ECO（Exactly once）語(yǔ)義是流式處理程序的重要話(huà)題城舞，也是很多流式處理程序問(wèn)題的關(guān)鍵所在妓忍。 為了保證每個(gè)消息在系統(tǒng)或網(wǎng)絡(luò)故障的情況下，...
發(fā)簡(jiǎn)信
IP屬地：北京
-
SparkStreaming Exactly Once語(yǔ)義總結(jié)
-
多圖詳解 Kafka 原理與架構(gòu)，建議收藏！
來(lái)源：https://www.cnblogs.com/bainianminguo/p/12247158.html[https://www.cnblogs.com/bainia...
-
5W字總結(jié)Spark（一）(建議收藏)
本文目錄： 一、Spark 基礎(chǔ)二屿脐、Spark Core三、Spark SQL四掰盘、Spark Streaming五摄悯、Structured Streaming六、Spark 兩...
-
【譯】Scala面試問(wèn)題（Scala interview questions）意譯一篇《scala面試問(wèn)題》的博客愧捕，原文地址：http://pedrorijo.com/blog/scala-interview-questions/奢驯，代碼示例我在本地做了...
-
5W字總結(jié)Spark（三）(建議收藏)
八、Spark 數(shù)據(jù)傾斜 詳見(jiàn)： 八種解決 Spark 數(shù)據(jù)傾斜的方法http://www.reibang.com/p/a917c9969cff[https://www.j...
-
Spark--Spark Shuffle發(fā)展史及調(diào)優(yōu)方法資料整理次绘，圖片來(lái)源自互聯(lián)網(wǎng)瘪阁，如有侵權(quán)請(qǐng)聯(lián)系刪除--李小李 1-Spark Shuffle發(fā)展史 1.1 Shuffle概述 在Spark的源碼中，負(fù)責(zé)shuffle過(guò)程的執(zhí)行...
-
【k8s系列1】spark on k8s 與 spark on k8s operator的對(duì)比
對(duì)于目前基于k8s的的spark應(yīng)用邮偎，主要采用兩種方式運(yùn)行 spark原生支持的 spark on k8s[http://spark.apache.org/docs/3.0....
-
k8s整體架構(gòu)的知識(shí)整理1管跺、master節(jié)點(diǎn) Master是Kubernetes Cluster的大腦，運(yùn)行著的Daemon服務(wù)有一下幾個(gè)： kube-apiserver kube-schedule...
-
一篇文章禾进，教你學(xué)會(huì)Git
本文轉(zhuǎn)載于掘金Ruheng豁跑，總結(jié)非常好，故不再重復(fù)造輪子泻云。 在日常工作中艇拍，經(jīng)常會(huì)用到Git操作。但是對(duì)于新人來(lái)講宠纯，剛上來(lái)對(duì)Git很陌生卸夕，操作起來(lái)也很懵逼。本篇文章主要針對(duì)剛開(kāi)...
