支付寬表 支付寬表的目的秦叛，最主要的原因是支付表沒(méi)有到訂單明細(xì)阱持，支付金額沒(méi)有細(xì)分到商品上， 沒(méi)有辦法統(tǒng)計(jì)商品級(jí)的支付狀況规阀。 所以本次寬表的核心就是...
投稿
收錄了11篇文章 · 3人關(guān)注
-
11.Flink實(shí)時(shí)項(xiàng)目之支付寬表
-
2.Flink實(shí)時(shí)項(xiàng)目之Maxwell介紹
1. Maxwell介紹 Maxwell 是由美國(guó) Zendesk 開(kāi)源恒序，用 Java 編寫的 MySQL 實(shí)時(shí)抓取軟件。 實(shí)時(shí)讀取 MySQL...
-
4.Flink實(shí)時(shí)項(xiàng)目之日志數(shù)據(jù)拆分
1. 摘要 我們前面采集的日志數(shù)據(jù)已經(jīng)保存到 Kafka 中谁撼，作為日志數(shù)據(jù)的 ODS 層歧胁，從 kafka 的ODS 層讀取的日志數(shù)據(jù)分為 3 類...
-
5.Flink實(shí)時(shí)項(xiàng)目之業(yè)務(wù)數(shù)據(jù)準(zhǔn)備1. 流程介紹 在上一篇文章中，我們已經(jīng)把客戶端的頁(yè)面日志厉碟，啟動(dòng)日志喊巍，曝光日志分別發(fā)送到kafka對(duì)應(yīng)的主題中。在本文中箍鼓，我們將把業(yè)務(wù)數(shù)據(jù)也發(fā)送...
-
6.Flink實(shí)時(shí)項(xiàng)目之業(yè)務(wù)數(shù)據(jù)分流
在上一篇文章中崭参，我們已經(jīng)獲取到了業(yè)務(wù)數(shù)據(jù)的輸出流，分別是dim層維度數(shù)據(jù)的輸出流款咖，及dwd層事實(shí)數(shù)據(jù)的輸出流何暮，接下來(lái)我們要做的就是把這些輸出流分...
-
1.Flink實(shí)時(shí)項(xiàng)目之前期準(zhǔn)備1.日志生成項(xiàng)目 日志生成機(jī)器：hadoop101 jar包：mock-log-0.0.1-SNAPSHOT.jar gmall_mock 項(xiàng)目...
-
3.Flink實(shí)時(shí)項(xiàng)目之流程分析及環(huán)境搭建1. 流程分析 前面已經(jīng)將日志數(shù)據(jù)（ods_base_log）及業(yè)務(wù)數(shù)據(jù)（ods_base_db_m）發(fā)送到kafka，作為ods層铐殃，接下來(lái)要...
-
7.Flink實(shí)時(shí)項(xiàng)目之獨(dú)立訪客開(kāi)發(fā)1.架構(gòu)說(shuō)明 在上6節(jié)當(dāng)中海洼，我們已經(jīng)完成了從ods層到dwd層的轉(zhuǎn)換，包括日志數(shù)據(jù)和業(yè)務(wù)數(shù)據(jù)富腊，下面我們開(kāi)始做dwm層的任務(wù)坏逢。 DWM 層主要服務(wù)...
-
8.Flink實(shí)時(shí)項(xiàng)目之CEP計(jì)算訪客跳出
1.訪客跳出明細(xì)介紹 首先要識(shí)別哪些是跳出行為，要把這些跳出的訪客最后一個(gè)訪問(wèn)的頁(yè)面識(shí)別出來(lái)蟹肘。那么就要抓住幾個(gè)特征： 該頁(yè)面是用戶近期訪問(wèn)的第一...
-
9.Flink實(shí)時(shí)項(xiàng)目之訂單寬表1.需求分析 訂單是統(tǒng)計(jì)分析的重要的對(duì)象词疼，圍繞訂單有很多的維度統(tǒng)計(jì)需求，比如用戶帘腹、地區(qū)贰盗、商品、品類阳欲、品牌等等舵盈。為了之后統(tǒng)計(jì)計(jì)算更加方便，減少大表...
{var%20f='http://v.t.sina.com.cn/share/share.php?appkey=1881139527',u=z||d.location,p=['&url=',e(u),'&title=',e(t||d.title),'&source=',e(r),'&sourceUrl=',e(l),'&content=',c||'gb2312','&pic=',e(p||'')].join('');function%20a(){if(!window.open([f,p].join(''),'mb',['toolbar=0,status=0,resizable=1,width=440,height=430,left=',(s.width-440)/2,',top=',(s.height-430)/2].join('')))u.href=[f,p].join('');};if(/Firefox/.test(navigator.userAgent))setTimeout(a,0);else%20a();})(screen,document,encodeURIComponent,'','','https://upload.jianshu.io/collections/images/1984321/flink.jpg', '推薦專題《Flink實(shí)時(shí)項(xiàng)目》（ 分享自 @簡(jiǎn)書(shū) ）','http://www.reibang.com/c/d9a333647dbb?utm_campaign=maleskine&utm_content=collection&utm_medium=reader_share&utm_source=weibo','頁(yè)面編碼gb2312|utf-8默認(rèn)gb2312'));){kind=link}