數(shù)倉(cāng)--Theory--對(duì)數(shù)據(jù)中臺(tái)的理解

本文從概念和理論上進(jìn)行整理學(xué)習(xí)

數(shù)據(jù)中臺(tái)是什么

主流概念上講

  • 數(shù)據(jù)中臺(tái)是指通過(guò)數(shù)據(jù)技術(shù),對(duì)海量數(shù)據(jù)進(jìn)行采集许饿、計(jì)算阳欲、存儲(chǔ)、加工陋率,同時(shí)統(tǒng)一標(biāo)準(zhǔn)和口徑球化。數(shù)據(jù)中臺(tái)把數(shù)據(jù)統(tǒng)一之后,會(huì)形成標(biāo)準(zhǔn)數(shù)據(jù)瓦糟,再進(jìn)行存儲(chǔ)赊窥,形成大數(shù)據(jù)資產(chǎn)層,進(jìn)而為客戶提供高效服務(wù)狸页。這些服務(wù)跟企業(yè)的業(yè)務(wù)有較強(qiáng)的關(guān)聯(lián)性锨能,是這個(gè)企業(yè)獨(dú)有的且能復(fù)用的,它是企業(yè)業(yè)務(wù)和數(shù)據(jù)的沉淀芍耘,其不僅能降低重復(fù)建設(shè)址遇、減少煙囪式協(xié)作的成本,也是差異化競(jìng)爭(zhēng)優(yōu)勢(shì)所在斋竞。
  • 廣義的數(shù)據(jù)中臺(tái):既包括了數(shù)據(jù)生產(chǎn)力工具倔约,也包括了利用數(shù)據(jù)生產(chǎn)力工具做數(shù)據(jù)賦能落地的過(guò)程、組織和結(jié)果坝初;
  • 狹義的數(shù)據(jù)中臺(tái):專指數(shù)據(jù)生產(chǎn)力工具浸剩;

注意

  • 數(shù)據(jù)中臺(tái)建設(shè)的基礎(chǔ)還是數(shù)據(jù)倉(cāng)庫(kù)和數(shù)據(jù)中心,并且在數(shù)倉(cāng)模型的設(shè)計(jì)上也是一脈傳承鳄袍,之所以我們現(xiàn)在處處推崇數(shù)據(jù)中臺(tái)建設(shè)及應(yīng)用绢要,一個(gè)是因?yàn)閿?shù)據(jù)中臺(tái)確實(shí)有過(guò)人之處,另一個(gè)是這套模型在阿里體現(xiàn)了巨大的應(yīng)用價(jià)值拗小。(來(lái)源袋鼠云數(shù)據(jù)中臺(tái)專欄(一) :淺析數(shù)據(jù)中臺(tái)策略與建設(shè)實(shí)踐
  • 數(shù)據(jù)中臺(tái)是解決數(shù)據(jù)“存”重罪、“通”、“用”難題哀九,讓一切業(yè)務(wù)數(shù)據(jù)化剿配,一切數(shù)據(jù)業(yè)務(wù)化!
    ER圖如下:


    數(shù)據(jù)中臺(tái)ER圖.jpeg

數(shù)據(jù)中臺(tái)具體包含那些內(nèi)容

“數(shù)據(jù)中臺(tái)”一般包含以下幾個(gè)部分:
1阅束、數(shù)據(jù)倉(cāng)庫(kù):用來(lái)存儲(chǔ)數(shù)據(jù)的呼胚,結(jié)構(gòu)性數(shù)據(jù)、非結(jié)構(gòu)性數(shù)據(jù)等息裸,還有離線數(shù)據(jù)和實(shí)時(shí)數(shù)據(jù)等蝇更;
2沪编、大數(shù)據(jù)中間件:包含了大數(shù)據(jù)計(jì)算服務(wù)、大數(shù)據(jù)研發(fā)套件簿寂、數(shù)據(jù)分析及展現(xiàn)工具漾抬;
3、數(shù)據(jù)資產(chǎn)管理:按照阿里的體系應(yīng)該分為垂直數(shù)據(jù)常遂、公共數(shù)據(jù)和萃取數(shù)據(jù)3層纳令;
(來(lái)源什么是 數(shù)據(jù)中臺(tái),關(guān)于數(shù)據(jù)中臺(tái)最好的解讀

總結(jié):數(shù)據(jù)中臺(tái)的內(nèi)核包括兩個(gè)方面克胳,一個(gè)是應(yīng)用數(shù)據(jù)的技術(shù)能力平绩,一個(gè)是數(shù)據(jù)資產(chǎn)的管理∧恚‘

以阿里為例

  • “第一是數(shù)據(jù)技術(shù)捏雌。沒(méi)有數(shù)據(jù)中臺(tái)的時(shí)候,不管是阿里內(nèi)部還是各商家笆搓,大家都有自己的數(shù)據(jù)中心性湿、機(jī)房、小數(shù)據(jù)庫(kù)满败。但當(dāng)數(shù)據(jù)積累到一定體量后肤频,這方面的成本會(huì)非常高,而且數(shù)據(jù)之間的質(zhì)量和標(biāo)準(zhǔn)不一樣算墨,會(huì)導(dǎo)致效率不高等問(wèn)題宵荒。因此,我們需要通過(guò)數(shù)據(jù)技術(shù)净嘀,對(duì)海量數(shù)據(jù)進(jìn)行采集报咳、計(jì)算、存儲(chǔ)挖藏、加工暑刃,同時(shí)統(tǒng)一標(biāo)準(zhǔn)和口徑“静裕”
  • “第二是數(shù)據(jù)資產(chǎn)稍走。數(shù)據(jù)中臺(tái)把阿里系的數(shù)據(jù)統(tǒng)一之后,會(huì)形成標(biāo)準(zhǔn)數(shù)據(jù)柴底,再進(jìn)行存儲(chǔ),形成大數(shù)據(jù)資產(chǎn)層粱胜,進(jìn)而保證為集團(tuán)各業(yè)務(wù)和商家提供高效服務(wù)柄驻。”
  • “第三和第四都是數(shù)據(jù)服務(wù)焙压,包括服務(wù)商家和服務(wù)小二鸿脓。例如生意參謀和阿里指數(shù)抑钟,就是數(shù)據(jù)中臺(tái)中面向商家端提供的數(shù)據(jù)服務(wù)∫翱蓿”
  • “數(shù)據(jù)中臺(tái)服務(wù)阿里在塔,說(shuō)白了更多是在為各位商家服務(wù)。平臺(tái)會(huì)確保大家在使用數(shù)據(jù)的過(guò)程中拨黔,口徑蛔溃、標(biāo)準(zhǔn)、時(shí)效性篱蝇、效率都有保障贺待,能有更高的可靠性和穩(wěn)定性×憬兀”

(來(lái)源數(shù)據(jù)中臺(tái)到底是什么麸塞?)
重點(diǎn)在數(shù)據(jù)服務(wù)和數(shù)據(jù)效率與質(zhì)量。

數(shù)據(jù)中臺(tái)的價(jià)值

從數(shù)據(jù)架構(gòu)和企業(yè)文化兩個(gè)方向去理解涧衙,理解清楚了才會(huì)明白哪工!

從企業(yè)數(shù)據(jù)架構(gòu)講有以下四點(diǎn)

(來(lái)源什么是 數(shù)據(jù)中臺(tái),關(guān)于數(shù)據(jù)中臺(tái)最好的解讀

01-數(shù)據(jù)資產(chǎn)管理

盤點(diǎn)數(shù)據(jù)資源弧哎、規(guī)劃數(shù)據(jù)資源雁比、獲取數(shù)據(jù)資源,并將所有數(shù)據(jù)資源進(jìn)行完整呈現(xiàn)傻铣;通過(guò)元數(shù)據(jù)信息收集章贞、數(shù)據(jù)血緣探查、數(shù)據(jù)權(quán)限申請(qǐng)授權(quán)等手段非洲,解決"有哪些數(shù)據(jù)可用"鸭限、"到哪里可以找到數(shù)據(jù)"的難題,并且提升數(shù)據(jù)資源的利用率两踏。

02-數(shù)據(jù)質(zhì)量管理

數(shù)據(jù)質(zhì)量就是保障數(shù)據(jù)正確性的工具败京,主要包括這么幾部分:一是支持準(zhǔn)確性校驗(yàn)規(guī)則,二是支持雙表校驗(yàn)梦染,三是輸出校驗(yàn)報(bào)告赡麦。

03-數(shù)據(jù)模型管理

數(shù)據(jù)模型管理,主要是為解決架構(gòu)設(shè)計(jì)和數(shù)據(jù)開(kāi)發(fā)的不一致性帕识,是為了約束平臺(tái)使用者的表名泛粹、字段名的規(guī)范性,架構(gòu)師從工具層合理的進(jìn)行模型分層和統(tǒng)一開(kāi)發(fā)規(guī)范,包括2部分肮疗,一個(gè)是規(guī)則配置晶姊,另一個(gè)是對(duì)表名、字段名的定期校驗(yàn)伪货。

04-構(gòu)建標(biāo)簽體系

對(duì)用戶们衙、產(chǎn)品钾怔、客商、營(yíng)銷各主題域進(jìn)行標(biāo)簽提取蒙挑,將其特征數(shù)字化宗侦,為后續(xù)進(jìn)行精準(zhǔn)營(yíng)銷和用戶畫(huà)像提供必要條件。著重分析當(dāng)前需要但是無(wú)法獲取到的指標(biāo)忆蚀,描述使用不便的指標(biāo)矾利,分析問(wèn)題原因,繪制數(shù)據(jù)供應(yīng)鏈條蜓谋;

05-數(shù)據(jù)應(yīng)用規(guī)劃及實(shí)現(xiàn)

數(shù)據(jù)中臺(tái)策略的基本理念是梦皮,將所有的數(shù)據(jù)匯聚到數(shù)據(jù)中臺(tái),以后的每個(gè)數(shù)據(jù)應(yīng)用(無(wú)論是指標(biāo)和分析類的桃焕,還是畫(huà)像類和大數(shù)據(jù)類的)統(tǒng)統(tǒng)從數(shù)據(jù)中臺(tái)獲取數(shù)據(jù)剑肯,如果數(shù)據(jù)中臺(tái)沒(méi)有,那么數(shù)據(jù)中臺(tái)就負(fù)責(zé)把數(shù)據(jù)找來(lái)观堂,如果數(shù)據(jù)中臺(tái)找不來(lái)让网,就說(shuō)明當(dāng)前真沒(méi)有這個(gè)數(shù)據(jù),數(shù)據(jù)應(yīng)用也就無(wú)從展開(kāi)师痕。

從企業(yè)文化上講

(來(lái)源企業(yè)的數(shù)據(jù)中臺(tái)的價(jià)值

01-回歸數(shù)據(jù)的本質(zhì)--數(shù)據(jù)重用
  • 今天的浙江移動(dòng)已經(jīng)將2000個(gè)基礎(chǔ)模型作為所有數(shù)據(jù)服務(wù)開(kāi)發(fā)的基礎(chǔ)溃睹,這些基礎(chǔ)模型做到了“書(shū)同文,車同軌”胰坟,無(wú)論應(yīng)用的數(shù)據(jù)模型有多復(fù)雜因篇,總是能溯源到2000張基礎(chǔ)表,這奠定了數(shù)據(jù)核對(duì)和認(rèn)知的基礎(chǔ)笔横,最大程度的避免了“重復(fù)數(shù)據(jù)抽取和維護(hù)帶來(lái)的成本浪費(fèi)竞滓。
  • ”曾經(jīng)企業(yè)的數(shù)據(jù)抽取就有多份,報(bào)表一份吹缔,數(shù)據(jù)倉(cāng)庫(kù)一份商佑,地市集市一份,無(wú)論是抽取壓力厢塘、維護(hù)難度及數(shù)據(jù)一致性要求都很高茶没。同時(shí),統(tǒng)一的基礎(chǔ)模型將相關(guān)業(yè)務(wù)領(lǐng)域的數(shù)據(jù)做了很好的匯聚晚碾,解決了數(shù)據(jù)互通的訴求抓半,這點(diǎn)的意義巨大,誰(shuí)都知道數(shù)據(jù)1+1>2的意思格嘁。
02-數(shù)據(jù)中臺(tái)需要不斷的業(yè)務(wù)滋養(yǎng)
  • 在企業(yè)內(nèi)琅关,無(wú)論是專題、報(bào)表或取數(shù)讥蔽,當(dāng)前基本是煙囪式數(shù)據(jù)生產(chǎn)模式或者是項(xiàng)目制建設(shè)方式涣易,必然導(dǎo)致數(shù)據(jù)知識(shí)得不到沉淀和持續(xù)發(fā)展,從而造成模型不能真正成為可重用的組件冶伞,無(wú)法支撐數(shù)據(jù)分析的快速響應(yīng)和創(chuàng)新新症。
  • 究其原因是模型建設(shè)往往是項(xiàng)目式的建設(shè)方式,一旦項(xiàng)目結(jié)束响禽,在面對(duì)業(yè)務(wù)提出更多需求時(shí)徒爹,項(xiàng)目模型團(tuán)隊(duì)可能已經(jīng)撤離了,或者考核指標(biāo)早已經(jīng)隨著項(xiàng)目結(jié)束芋类,模型提供者在主觀上沒(méi)有太大的積極性去滿足新的需求隆嗅,如果當(dāng)初模型的擴(kuò)展性設(shè)計(jì)的不好,或者時(shí)間太緊侯繁,或者系統(tǒng)穩(wěn)定的需要胖喳,往往導(dǎo)致有心無(wú)力滿足新的需求,結(jié)果是數(shù)據(jù)模型無(wú)法再擴(kuò)展贮竟,成為事實(shí)上穩(wěn)定的但無(wú)用的模型丽焊。
  • 其實(shí),業(yè)務(wù)最不需要的就是模型的穩(wěn)定咕别,一個(gè)數(shù)據(jù)模型如果一味追求穩(wěn)定不變技健,一定程度就是故步自封,這樣的做法必然導(dǎo)致其他的新的類似的數(shù)據(jù)模型產(chǎn)生惰拱,當(dāng)越來(lái)越多的模型都采用自建的方式滿足需求時(shí)雌贱,意味著老的數(shù)據(jù)模型就可能要離開(kāi)歷史舞臺(tái)了,而留下的是割裂的成千上萬(wàn)的模型偿短,也就失去了模型知識(shí)沉淀的可能欣孤,曾經(jīng)做過(guò)一張幾百個(gè)字段的萬(wàn)能寬表,由于太大后來(lái)就沒(méi)人敢去動(dòng)它翔冀,隨著新的業(yè)務(wù)不斷增加导街,這張寬表的價(jià)值卻越來(lái)越低直至退出歷史舞臺(tái)。
  • 數(shù)據(jù)模型不需要“穩(wěn)定”纤子,而需要不斷的滋養(yǎng)搬瑰,只有在滋養(yǎng)中才能從最初的字段單一到逐漸成長(zhǎng)為企業(yè)最為寶貴的模型資產(chǎn)。
  • 其實(shí)標(biāo)簽也一樣控硼,做過(guò)不少異動(dòng)標(biāo)簽或離網(wǎng)模型泽论,曾經(jīng)效果不錯(cuò),隨著公司轉(zhuǎn)型流量經(jīng)營(yíng)卡乾,原來(lái)以語(yǔ)音異動(dòng)判斷為主的這類標(biāo)簽開(kāi)始難以適應(yīng)變化翼悴,但后續(xù)已經(jīng)沒(méi)人能改得動(dòng)它,這個(gè)標(biāo)簽也就退出了歷史舞臺(tái),退出的可不僅僅是一個(gè)標(biāo)簽鹦赎,這個(gè)標(biāo)簽承載的所有的既有經(jīng)驗(yàn)也就被廢棄掉了谍椅,想想這些標(biāo)簽當(dāng)初花了多大的代價(jià)做成就會(huì)感覺(jué)非常可惜古话。
  • 再以報(bào)表為例雏吭,企業(yè)報(bào)表成千上萬(wàn)的原因往往也是沒(méi)有沉淀造成的,針對(duì)一個(gè)業(yè)務(wù)報(bào)表陪踩,由于不同的業(yè)務(wù)人員提出的角度不同杖们,會(huì)幻化出成百上千的報(bào)表,如果有報(bào)表中臺(tái)的概念肩狂,就可以提出一些基準(zhǔn)報(bào)表的原則摘完,比如一個(gè)業(yè)務(wù)一張報(bào)表,已經(jīng)有的業(yè)務(wù)報(bào)表只允許修改而不允許新增傻谁,自然老報(bào)表就會(huì)由于新的需求而不斷完善孝治,從而能演化成企業(yè)的基礎(chǔ)報(bào)表目錄,否則就是一堆報(bào)表的堆砌栅螟,后續(xù)的數(shù)據(jù)一致性問(wèn)題層出不窮荆秦,管理成本急劇增加,人力投入越來(lái)越多力图,這樣的事情在每個(gè)企業(yè)都在發(fā)生步绸。
03-數(shù)據(jù)中臺(tái)是培育業(yè)務(wù)創(chuàng)新的土壤
  • 企業(yè)的數(shù)據(jù)創(chuàng)新一定要站在巨人的肩膀上,即從數(shù)據(jù)中臺(tái)開(kāi)始吃媒,不能總是從基礎(chǔ)做起瓤介,數(shù)據(jù)中臺(tái)是數(shù)據(jù)創(chuàng)新效率的保障。
  • 搞過(guò)機(jī)器學(xué)習(xí)的都知道赘那,沒(méi)有好的規(guī)整數(shù)據(jù)刑桑,數(shù)據(jù)準(zhǔn)備的過(guò)程極其冗長(zhǎng),這也是數(shù)據(jù)倉(cāng)庫(kù)模型的一個(gè)核心價(jià)值所在募舟,比如運(yùn)營(yíng)商中要獲取3個(gè)月的ARPU數(shù)據(jù)祠斧,如果沒(méi)有融合模型的支撐,得自己從賬單一層層匯總及關(guān)聯(lián)拱礁,速度可想而知琢锋。很多合作伙伴的數(shù)據(jù)科學(xué)家到一個(gè)企業(yè)水土不服,除了業(yè)務(wù)上不熟悉外呢灶,往往還面臨著數(shù)據(jù)準(zhǔn)備的困境吴超,取數(shù)的高難度導(dǎo)致他難以快速的去驗(yàn)證想法,企業(yè)想借助外力去搞數(shù)據(jù)創(chuàng)新有時(shí)成了一廂情愿鸯乃。
  • 標(biāo)簽也一樣鲸阻,企業(yè)打造標(biāo)簽可并不僅僅是做幾個(gè)標(biāo)簽?zāi)敲春?jiǎn)單,它需要打造的是一個(gè)標(biāo)簽服務(wù)平臺(tái),要能最大限度的規(guī)范標(biāo)簽的格式鸟悴,接入方式陈辱,組合方式,調(diào)用方式等等遣臼,只有這樣性置,基于標(biāo)簽的二次快速創(chuàng)新才有可能,企業(yè)每發(fā)布一個(gè)新的標(biāo)簽揍堰,就意味著新增了一種能力,這才是數(shù)據(jù)知識(shí)的真正傳承嗅义。比如當(dāng)常駐地模型發(fā)布成為標(biāo)簽平臺(tái)的一個(gè)標(biāo)簽后屏歹,以后凡是涉及到常駐地判斷的都可以直接調(diào)用,這極大降低了關(guān)于用戶位置數(shù)據(jù)準(zhǔn)備的成本之碗。
  • 在如今的互聯(lián)網(wǎng)時(shí)代蝙眶,企業(yè)都在全力謀求轉(zhuǎn)型,轉(zhuǎn)型的關(guān)鍵是要具備跟互聯(lián)網(wǎng)公司一樣的快速創(chuàng)新能力褪那,大數(shù)據(jù)是其中一個(gè)核心驅(qū)動(dòng)力幽纷,但擁有大數(shù)據(jù)還是不夠的,數(shù)據(jù)中臺(tái)的能力往往最終決定速度博敬,擁有速度意味著試錯(cuò)成本很低友浸,意味著可以再來(lái)一次。
04-數(shù)據(jù)中臺(tái)是人才成長(zhǎng)的搖籃
  • 記得筆者剛進(jìn)企業(yè)的時(shí)候偏窝,要獲得成長(zhǎng)一是靠人帶收恢,二是找人問(wèn),三是自己登陸各種系統(tǒng)去看源代碼祭往,這樣的學(xué)習(xí)比較支離破碎伦意,其實(shí)很難了解全貌,無(wú)法知道什么東西對(duì)于企業(yè)是最重要的硼补,獲得的文檔資料也往往也是過(guò)了時(shí)的驮肉。
  • 現(xiàn)在有了數(shù)據(jù)中臺(tái),很多成長(zhǎng)問(wèn)題就能解決已骇,有了基礎(chǔ)模型离钝,新人可以系統(tǒng)的學(xué)習(xí)企業(yè)有哪些基本數(shù)據(jù)能力,O域數(shù)據(jù)的增加更是讓其有更廣闊的視野疾捍,有了融合模型奈辰,新人可以知道有哪些主題域,從主題域切入去全局的理解公司的業(yè)務(wù)概念乱豆,有了標(biāo)簽庫(kù)奖恰,新人可以獲得前人的所有智慧結(jié)晶,有了數(shù)據(jù)管理平臺(tái),新人能清晰的追溯數(shù)據(jù)瑟啃、標(biāo)簽和應(yīng)用的來(lái)龍去脈论泛,所有的知識(shí)都是在線的,最新的蛹屿,意味著新人的高起點(diǎn)屁奏。
  • 更為關(guān)鍵的是,數(shù)據(jù)中臺(tái)讓新人擺脫了在起步階段對(duì)于導(dǎo)師的過(guò)渡依賴错负,能快速的融入團(tuán)隊(duì)坟瓢,在前人的基礎(chǔ)上進(jìn)行創(chuàng)新。數(shù)據(jù)中臺(tái)天然的統(tǒng)一犹撒,集成的特性折联,有可能讓新人打破點(diǎn)線的束縛,快速構(gòu)筑起自己的知識(shí)體系识颊,成為企業(yè)數(shù)據(jù)領(lǐng)域的專家诚镰。

數(shù)據(jù)中臺(tái)和數(shù)倉(cāng)的區(qū)別

來(lái)源數(shù)據(jù)中臺(tái)與之前的數(shù)據(jù)倉(cāng)庫(kù)有什么區(qū)別?

  • 從職能概念上講:

    • 數(shù)據(jù)中臺(tái)不單單指工具或者系統(tǒng)祥款,而更是像一個(gè)職能部門清笨,通過(guò)一些列的平臺(tái)、數(shù)據(jù)刃跛、工具抠艾、流程、規(guī)范來(lái)為整個(gè)組織提供數(shù)據(jù)資產(chǎn)管理和服務(wù)的智能部門奠伪;數(shù)據(jù)中臺(tái)負(fù)責(zé)全域數(shù)據(jù)采集跌帐、數(shù)據(jù)資產(chǎn)加工和整理、并向前臺(tái)業(yè)務(wù)部門和決策部門提供數(shù)據(jù)服務(wù)的绊率,所以數(shù)據(jù)中臺(tái)的核心應(yīng)該是數(shù)據(jù)資產(chǎn)管理和數(shù)據(jù)賦能谨敛。通俗的講就是數(shù)據(jù)彈藥庫(kù)。
      數(shù)據(jù)中臺(tái)職能篇.jpg
  • 數(shù)據(jù)中臺(tái)從某個(gè)意義來(lái)說(shuō)屬于數(shù)倉(cāng)的一種滤否,都是要把數(shù)據(jù)抽進(jìn)來(lái)建立一個(gè)數(shù)據(jù)倉(cāng)庫(kù)脸狸。但是兩者的數(shù)據(jù)來(lái)源和建立數(shù)倉(cāng)的目標(biāo)以及數(shù)據(jù)應(yīng)用的方向都存在很大差異。

  • 從數(shù)據(jù)源講:

    • 數(shù)據(jù)中臺(tái)的數(shù)據(jù)來(lái)源期望是全域數(shù)據(jù)包括業(yè)務(wù)數(shù)據(jù)庫(kù)藐俺,日志數(shù)據(jù)炊甲,埋點(diǎn)數(shù)據(jù)啰挪,爬蟲(chóng)數(shù)據(jù)绪励,外部數(shù)據(jù)等眨层。數(shù)據(jù)的來(lái)源可以是結(jié)構(gòu)化數(shù)據(jù)或者非結(jié)構(gòu)化的數(shù)據(jù)此虑。
    • 而傳統(tǒng)數(shù)倉(cāng)的數(shù)據(jù)來(lái)源主要是業(yè)務(wù)數(shù)據(jù)庫(kù)或者日志信息,數(shù)據(jù)格式也是以結(jié)構(gòu)化數(shù)據(jù)為主零抬。數(shù)據(jù)倉(cāng)庫(kù)通常采集某個(gè)主題域的數(shù)據(jù)除师。
  • 從建設(shè)目標(biāo)講(數(shù)據(jù)能力服務(wù)化):

    • 數(shù)據(jù)中臺(tái):建立數(shù)據(jù)中臺(tái)的目標(biāo)是為了融合整個(gè)企業(yè)的全部數(shù)據(jù)凝化,打通數(shù)據(jù)之間的隔閡,消除數(shù)據(jù)標(biāo)準(zhǔn)和口徑不一致的問(wèn)題官辽。數(shù)據(jù)中臺(tái)通常會(huì)對(duì)來(lái)自多方面的的基礎(chǔ)數(shù)據(jù)進(jìn)行清洗蛹磺,按照主題域概念建立多個(gè)以事物為主的主題域比如用戶主題域,商品主題域同仆,渠道主題域萤捆,門店主題域等等。數(shù)據(jù)中臺(tái)遵循三個(gè)one的概念: One Data, One ID, One Service俗批,就是說(shuō)數(shù)據(jù)中臺(tái)不僅僅是匯聚企業(yè)各種數(shù)據(jù)俗或,而且讓這些數(shù)據(jù)遵循相同的標(biāo)準(zhǔn)和口徑,對(duì)事物的標(biāo)識(shí)能統(tǒng)一或者相互關(guān)聯(lián)扶镀,并且提供統(tǒng)一的數(shù)據(jù)服務(wù)接口蕴侣。就像做菜一樣,按照標(biāo)準(zhǔn)化的菜名臭觉,先把所有可能用到的材料都準(zhǔn)備好。數(shù)據(jù)中臺(tái)讓更多的前臺(tái)應(yīng)用共享數(shù)據(jù)中臺(tái)提供的數(shù)據(jù)能力(比如:數(shù)據(jù)API辱志,數(shù)據(jù)標(biāo)簽蝠筑,數(shù)據(jù)監(jiān)控等);
    • 數(shù)據(jù)倉(cāng)庫(kù)通常是為了分析某些業(yè)務(wù)指標(biāo)揩懒,或分析某個(gè)主題數(shù)據(jù)什乙,目標(biāo)更明確,輸出更多的是數(shù)據(jù)結(jié)果已球,而不是數(shù)據(jù)能力臣镣。
  • 從數(shù)據(jù)應(yīng)用上講:

    • 數(shù)據(jù)中臺(tái):在數(shù)據(jù)應(yīng)用方面,建立在數(shù)據(jù)中臺(tái)上的數(shù)據(jù)應(yīng)用不僅僅只是面向于BI報(bào)表智亮,更多面向營(yíng)銷推薦忆某,用戶畫(huà)像,AI決策分析阔蛉,風(fēng)險(xiǎn)評(píng)估等弃舒。而且這些應(yīng)用的特點(diǎn)是比較輕,容易快速開(kāi)發(fā)出來(lái)状原,因?yàn)橹匾臄?shù)據(jù)分析工作在數(shù)據(jù)中臺(tái)已經(jīng)完成并且沉淀聋呢,之前工作成果都能被多個(gè)應(yīng)用共享。
    • 數(shù)倉(cāng)主要是面向主題和決策颠区。
  • 從投資回報(bào)率看:

    • 數(shù)據(jù)中臺(tái)輸出的是數(shù)據(jù)能力削锰,在建設(shè)數(shù)據(jù)中臺(tái)的時(shí)候,是預(yù)估使用方對(duì)數(shù)據(jù)能力的需求毕莱,所以要考慮ROI器贩;
    • 數(shù)據(jù)倉(cāng)庫(kù)通常是有明確的需求才會(huì)建設(shè)颅夺,一般不會(huì)考慮ROI。

數(shù)據(jù)中臺(tái)開(kāi)發(fā)存在的挑戰(zhàn)

  • 數(shù)據(jù)中臺(tái)的建立不是一蹴而就的磨澡,每個(gè)企業(yè)都應(yīng)該基于實(shí)際打造獨(dú)有的中臺(tái)能力碗啄,在這個(gè)過(guò)程中,需要遵循一些原則:首先稳摄,企業(yè)的組織架構(gòu)及機(jī)制需要順勢(shì)而變稚字,比如以前負(fù)責(zé)數(shù)據(jù)的部門或團(tuán)隊(duì)往往缺乏話語(yǔ)權(quán),面對(duì)業(yè)務(wù)需求往往是被動(dòng)的接受的角色厦酬,這讓一切數(shù)據(jù)中臺(tái)的想法化為泡影胆描,需要為數(shù)據(jù)中臺(tái)團(tuán)隊(duì)授權(quán)。
  • 其次仗阅,要改變工作方式昌讲,現(xiàn)在很多企業(yè)的數(shù)據(jù)團(tuán)隊(duì)的主要工作內(nèi)容就是項(xiàng)目管理、需求管理等等减噪,當(dāng)一個(gè)項(xiàng)目完成后又投入到下一個(gè)項(xiàng)目短绸,做好一個(gè)需求后又開(kāi)始負(fù)責(zé)下一個(gè)需求,這樣的工作確實(shí)非常鍛煉人的組織筹裕、協(xié)調(diào)能力醋闭,但這樣能力的提升與工作時(shí)間的長(zhǎng)短并不是呈線性增長(zhǎng)的,雖然增加了項(xiàng)目和需求管理經(jīng)驗(yàn)朝卒,但并不能在某一個(gè)專業(yè)領(lǐng)域得到知識(shí)和經(jīng)驗(yàn)的沉淀证逻,隨著時(shí)間的流逝,越來(lái)越多的人會(huì)失去最初的工作積極性和創(chuàng)造性抗斤,事實(shí)上囚企,數(shù)據(jù)人員只有深入的研究業(yè)務(wù)、數(shù)據(jù)和模型瑞眼,端到端的去實(shí)踐龙宏,打造出數(shù)據(jù)中臺(tái),才是最大的價(jià)值創(chuàng)造负拟,才能使得持續(xù)創(chuàng)新成為可能烦衣。
  • 第三,數(shù)據(jù)中臺(tái)的團(tuán)隊(duì)要從傳統(tǒng)的支撐角色逐步向運(yùn)營(yíng)角色轉(zhuǎn)變掩浙,不僅在數(shù)據(jù)上花吟,在業(yè)務(wù)上也要努力趕超業(yè)務(wù)人員,中臺(tái)人員要逐步建立起對(duì)于業(yè)務(wù)的話語(yǔ)權(quán)厨姚,不僅僅是接受需求的角色衅澈,更要能提出合理的建議,能為業(yè)務(wù)帶來(lái)新的增長(zhǎng)點(diǎn)谬墙,比如精確營(yíng)銷今布。
  • DT時(shí)代经备,接下來(lái)整個(gè)社會(huì)會(huì)進(jìn)入開(kāi)放共享的時(shí)代,致力于大數(shù)據(jù)變現(xiàn)的企業(yè)最大的價(jià)值就是將這些核心數(shù)據(jù)能力進(jìn)行對(duì)外開(kāi)放的運(yùn)營(yíng)部默,到那個(gè)時(shí)代侵蒙,數(shù)據(jù)中臺(tái)將成為企業(yè)最為寶貴的資產(chǎn)。從個(gè)人的角度講傅蹂,將自己的貢獻(xiàn)幻化為中臺(tái)能力纷闺,能夠持續(xù)的為公司創(chuàng)造價(jià)值,這是值得驕傲的事情
最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末份蝴,一起剝皮案震驚了整個(gè)濱河市犁功,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌婚夫,老刑警劉巖浸卦,帶你破解...
    沈念sama閱讀 216,372評(píng)論 6 498
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異案糙,居然都是意外死亡限嫌,警方通過(guò)查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,368評(píng)論 3 392
  • 文/潘曉璐 我一進(jìn)店門时捌,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái)萤皂,“玉大人,你說(shuō)我怎么就攤上這事匣椰。” “怎么了端礼?”我有些...
    開(kāi)封第一講書(shū)人閱讀 162,415評(píng)論 0 353
  • 文/不壞的土叔 我叫張陵禽笑,是天一觀的道長(zhǎng)。 經(jīng)常有香客問(wèn)我蛤奥,道長(zhǎng)佳镜,這世上最難降的妖魔是什么? 我笑而不...
    開(kāi)封第一講書(shū)人閱讀 58,157評(píng)論 1 292
  • 正文 為了忘掉前任凡桥,我火速辦了婚禮蟀伸,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘缅刽。我一直安慰自己啊掏,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,171評(píng)論 6 388
  • 文/花漫 我一把揭開(kāi)白布衰猛。 她就那樣靜靜地躺著迟蜜,像睡著了一般。 火紅的嫁衣襯著肌膚如雪啡省。 梳的紋絲不亂的頭發(fā)上娜睛,一...
    開(kāi)封第一講書(shū)人閱讀 51,125評(píng)論 1 297
  • 那天髓霞,我揣著相機(jī)與錄音,去河邊找鬼畦戒。 笑死方库,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的障斋。 我是一名探鬼主播纵潦,決...
    沈念sama閱讀 40,028評(píng)論 3 417
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼配喳!你這毒婦竟也來(lái)了酪穿?” 一聲冷哼從身側(cè)響起,我...
    開(kāi)封第一講書(shū)人閱讀 38,887評(píng)論 0 274
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤晴裹,失蹤者是張志新(化名)和其女友劉穎被济,沒(méi)想到半個(gè)月后,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體涧团,經(jīng)...
    沈念sama閱讀 45,310評(píng)論 1 310
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡只磷,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,533評(píng)論 2 332
  • 正文 我和宋清朗相戀三年泌绣,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了钮追。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 39,690評(píng)論 1 348
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡阿迈,死狀恐怖元媚,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情苗沧,我是刑警寧澤刊棕,帶...
    沈念sama閱讀 35,411評(píng)論 5 343
  • 正文 年R本政府宣布,位于F島的核電站待逞,受9級(jí)特大地震影響甥角,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜识樱,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,004評(píng)論 3 325
  • 文/蒙蒙 一嗤无、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧怜庸,春花似錦当犯、人聲如沸。這莊子的主人今日做“春日...
    開(kāi)封第一講書(shū)人閱讀 31,659評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)。三九已至杈曲,卻和暖如春驰凛,著一層夾襖步出監(jiān)牢的瞬間胸懈,已是汗流浹背。 一陣腳步聲響...
    開(kāi)封第一講書(shū)人閱讀 32,812評(píng)論 1 268
  • 我被黑心中介騙來(lái)泰國(guó)打工恰响, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留趣钱,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 47,693評(píng)論 2 368
  • 正文 我出身青樓胚宦,卻偏偏與公主長(zhǎng)得像首有,于是被迫代替她去往敵國(guó)和親。 傳聞我的和親對(duì)象是個(gè)殘疾皇子枢劝,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,577評(píng)論 2 353

推薦閱讀更多精彩內(nèi)容