實(shí)時(shí)數(shù)倉 - 專題

投稿

實(shí)時(shí)數(shù)倉

收錄了12篇文章 · 6人關(guān)注

Mac 在IDEA 部署flink 并編寫第一個(gè)流式WordCount程序
1、環(huán)境配置 Java 環(huán)境配置：https://www.runoob.com/java/java-environment-setup.html...

0.2 afansdie 2
老生長談的數(shù)據(jù)倉庫 3 種建模方法钧舌，附貓眼娛樂數(shù)倉架構(gòu)演進(jìn)流椒！
貓眼技術(shù)團(tuán)隊(duì)https://juejin.im/post/5d5be159f265da03970bbc3a 數(shù)據(jù)倉庫存在的初期敏簿，甚至沒有數(shù)據(jù)倉庫...

4.1 碼農(nóng)小光 1 15

流式計(jì)算的代表：Storm，F(xiàn)link宣虾，Spark Streaming
流式計(jì)算的代表：Storm极谊，F(xiàn)link，Spark Streaming Strom 1.Strom的主從架構(gòu) nimbus是集群的Master安岂，...

0.7 Movle 0 3
Flink-雙十一神話的基石
2019年天貓雙11再次刷新世界記錄轻猖，訂單創(chuàng)新峰值達(dá)到54.4萬筆/秒，單日數(shù)據(jù)處理量達(dá)到970PB域那；支撐起這個(gè)雙十一狂歡神話是阿里強(qiáng)悍的數(shù)據(jù)云...

0.6 SUSUR_28f6 0 3
Flink基本概念之?dāng)?shù)據(jù)流編程模型（DataFlow Programming Model）
功能層級抽象（Levels of Abstraction） ??Flink為開發(fā)Streaming咙边、batch等不同的應(yīng)用提供了四種不同層次的抽...

0.5 老羊_肖恩 0 4
基于flink sql構(gòu)建實(shí)時(shí)數(shù)據(jù)倉庫
1、需求背景根據(jù)目前大數(shù)據(jù)這一塊的發(fā)展次员，已經(jīng)不局限于離線的分析败许，挖掘數(shù)據(jù)潛在的價(jià)值，數(shù)據(jù)的時(shí)效性最近幾年變得剛需淑蔚，實(shí)時(shí)處理的框架有storm市殷，...

7.0 憤怒的謎團(tuán) 6 39
Flink 從0到1學(xué)習(xí)—— 分享四本 Flink 國外的書和二十多篇 Paper 論文
前言之前也分享了不少自己的文章，但是對于 Flink 來說刹衫，還是有不少新入門的朋友醋寝，這里給大家分享點(diǎn) Flink 相關(guān)的資料（國外數(shù)據(jù) pdf...

0.1 zhisheng_blog 0 1

流處理中的時(shí)間概念和窗口類型
流處理中主要有三個(gè)時(shí)間概念搞挣，分別是事件時(shí)間、處理時(shí)間音羞、攝取時(shí)間囱桨。事件時(shí)間是指事件實(shí)際發(fā)生的事件。更準(zhǔn)確地說嗅绰，每一個(gè)時(shí)間都有一個(gè)與它相關(guān)的時(shí)間戳...

0.3 afansdie 0 2
采用流處理架構(gòu)進(jìn)行計(jì)數(shù)處理
之前介紹過如何運(yùn)行批處理作業(yè)來模擬流處理舍肠。本文主要介紹一種更好的方法來對事件流進(jìn)行計(jì)數(shù)，也就是采用流處理架構(gòu)來進(jìn)行計(jì)數(shù)處理窘面。通過流處理架構(gòu)來實(shí)現(xiàn)...

0.3 afansdie 0 1
簡述傳統(tǒng)的數(shù)據(jù)批處理架構(gòu)和Lambda架構(gòu)計(jì)數(shù)
大規(guī)模的計(jì)數(shù)任務(wù)在實(shí)踐中出乎意料的困難翠语，本文主要介紹傳統(tǒng)的批處理架構(gòu)實(shí)現(xiàn)計(jì)數(shù)任務(wù)和基于Lambda架構(gòu)實(shí)現(xiàn)計(jì)數(shù)。傳統(tǒng)的批處理架構(gòu)：持續(xù)讀取數(shù)...

0.3 afansdie 0 1