公司拓展業(yè)務(wù)额获,要建設(shè)數(shù)據(jù)中臺。闊是呢恭应,我們連數(shù)據(jù)倉庫的概念都沒有抄邀,事情進(jìn)展不下去≈玳唬總監(jiān)一錘定音境肾,先從數(shù)據(jù)倉庫建設(shè)起步。作為一個零售企業(yè)轉(zhuǎn)型大數(shù)據(jù)應(yīng)用領(lǐng)域胆屿,建設(shè)數(shù)據(jù)倉庫可謂是從零開始奥喻。作為團(tuán)本唯一一個數(shù)據(jù)開發(fā)工程師,這事情自然落在了我身上莺掠,鴨梨山大呀衫嵌。以前都是做離線读宙、實時數(shù)據(jù)開發(fā)的彻秆,數(shù)據(jù)倉庫建設(shè)真的參與很少,為了快速開始任務(wù),惡補(bǔ)了一些數(shù)倉知識唇兑。
數(shù)據(jù)倉庫的一些概念
數(shù)據(jù)域:
指面向業(yè)務(wù)分析酒朵,將業(yè)務(wù)過程或者維度進(jìn)行抽象的集合。其中扎附,業(yè)務(wù)過程可以概括為一個個不可拆分的行為事件蔫耽。在業(yè)務(wù)過程之下,可以定義指標(biāo)留夜;維度是指度量的環(huán)境匙铡,如買家下單事件,買家是維度碍粥,為保障整個體系的生命力鳖眼,數(shù)據(jù)域是需要抽象提煉,并且長期維護(hù)和更新的嚼摩,但不輕易變動钦讳。
在劃分?jǐn)?shù)據(jù)域時 既能涵蓋當(dāng)前所有的業(yè)務(wù)需求,又能在新業(yè)務(wù)進(jìn)入時無影響地被包含進(jìn)已有的數(shù)據(jù)域中和擴(kuò)展新的數(shù)據(jù)域枕面。
業(yè)務(wù)過程:
指企業(yè)的業(yè)務(wù)活動事件愿卒,如下單、支付潮秘、退款都是業(yè)務(wù)過程琼开。請注意,業(yè)務(wù)過程是一個不可拆分的行為事件枕荞,通俗地講稠通,業(yè)務(wù)過程就是企業(yè)活動中的事件。
時間周期:
用來明確數(shù)據(jù)統(tǒng)計的時間范圍或者時間點(diǎn)改橘,如最近 30 天、自然周玉控、截至當(dāng)日等飞主。
修飾類型:
是對修飾詞的一種抽象劃分。修飾類型從屬于某個業(yè)務(wù)域高诺,如日志域的訪問終端類型涵蓋無線端碌识、 PC端等修飾詞。
修飾詞:
指除了統(tǒng)計維度以外指標(biāo)的業(yè)務(wù)場景限定抽象虱而。修飾詞隸屬于一種修飾類型筏餐,如在日志域的訪問終端類型下,有修飾詞 PC 端牡拇、無線端等魁瞪。
度量/原子指標(biāo):
原子指標(biāo)和度量含義相同,基于某一業(yè)務(wù)事件行為下的度量导俘,是業(yè)務(wù)定義中不可再拆分的指標(biāo)峦耘,具有明確業(yè)務(wù)含義的名詞 ,如支付金額旅薄。
維度:
維度是度量的環(huán)境辅髓,用來反映業(yè)務(wù)的一類屬性。這類屬性的集合構(gòu)成一個維度少梁,也可以稱為實體對象洛口。維度屬于一個數(shù)據(jù)域,如地理維度(其中包括國家凯沪、地區(qū)绍弟、省以及城市等級別的內(nèi)容)、時間維度(其中包括年著洼、季樟遣、月、周身笤、日等級別的內(nèi)容)豹悬。
維度屬性:
維度屬性隸屬于一個維度 如地理維度里面的國家名稱、同家 ID 液荸、省份名稱等都屬于維度屬性瞻佛。
派生指標(biāo):
派生指標(biāo)= 一個原子指標(biāo)+多個修飾詞(可選)+時間周期娇钱∩吮可以理解為對原子指標(biāo)業(yè)務(wù)統(tǒng)計范圍的圈定。
如原子指標(biāo):
支付金額文搂,最近1天海外買家支付金額則為派生指標(biāo)(最近1天為時間周期适刀,海外為修飾詞,買家作為維度煤蹭,而不作為修飾詞)笔喉。