數(shù)據(jù)中臺是什么?

數(shù)據(jù)中臺被譽為大數(shù)據(jù)的下一站余耽,由阿里興起缚柏,核心思想是數(shù)據(jù)共享。如今似乎人人都在提數(shù)據(jù)中臺碟贾,但卻不是所有人都清楚數(shù)據(jù)中臺到底意味著什么币喧。

一、什么是中臺

要回答數(shù)據(jù)中臺是什么袱耽,首先要探討一下中臺到底是什么杀餐。中臺,通過對業(yè)務(wù)朱巨、數(shù)據(jù)和技術(shù)的抽象史翘,對服務(wù)能力進行復(fù)用,構(gòu)建了企業(yè)級的服務(wù)能力冀续,消除了企業(yè)內(nèi)部各業(yè)務(wù)部門琼讽、各分子公司之間的壁壘,適應(yīng)了企業(yè)特別是大型企業(yè)集團業(yè)務(wù)多元化的發(fā)展戰(zhàn)略洪唐∽甑牛基于中臺,可快速構(gòu)建面向最終消費者和客戶的前臺應(yīng)用凭需,從而滿足各種個性化特征的前臺需求问欠,為企業(yè)的數(shù)字化轉(zhuǎn)型提供明確的道路肝匆。

從技術(shù)系統(tǒng)層面看,中臺是企業(yè)級共享服務(wù)平臺顺献。傳統(tǒng)的IT系統(tǒng)或套件沒有太多關(guān)注系統(tǒng)能力的復(fù)用和共享旗国,因此企業(yè)在多年的信息化過程中引入和建設(shè)了多套具有重復(fù)功能的煙囪型系統(tǒng)。而中臺則要求對能力進行細(xì)粒度分析注整,識別共享能力粗仓,并將共享能力建設(shè)成統(tǒng)一的平臺。因此中臺不是單系統(tǒng)的服務(wù)化设捐。

綜上所述借浊,中臺是能力的樞紐和對能力的共享。中臺是在集中的基礎(chǔ)上建設(shè)分權(quán)的業(yè)務(wù)萝招,進行聯(lián)通蚂斤,并為各業(yè)務(wù)提供統(tǒng)一的服務(wù)。因此一切將企業(yè)的各式各樣的資源轉(zhuǎn)化為易于前臺使用的能力槐沼,為企業(yè)進行“以用戶為中心”的數(shù)字化轉(zhuǎn)型服務(wù)的平臺曙蒸,都是中臺。

二岗钩、什么是數(shù)據(jù)中臺

數(shù)據(jù)是從業(yè)務(wù)系統(tǒng)產(chǎn)生的纽窟,而業(yè)務(wù)系統(tǒng)也需要數(shù)據(jù)分析的結(jié)果,那么是否可以把業(yè)務(wù)系統(tǒng)的數(shù)據(jù)存儲和計算能力抽離兼吓,由單獨的數(shù)據(jù)處理平臺提供存儲和計算能力臂港?這樣不僅可以簡化業(yè)務(wù)系統(tǒng)的復(fù)雜性,還可以讓各個系統(tǒng)采用更合適的技術(shù)视搏,專注做本身擅長的事审孽。這個專用的數(shù)據(jù)處理平臺即數(shù)據(jù)中臺。

數(shù)據(jù)中臺是一個用技術(shù)連接大數(shù)據(jù)計算存儲能力浑娜,用業(yè)務(wù)連接數(shù)據(jù)應(yīng)用場景能力的平臺佑力。

“連接能力”是數(shù)據(jù)中臺的精髓。作為一個處在中間層的能力平臺筋遭,“連接”是其根本任務(wù)打颤。在業(yè)務(wù)層面需要盡可能連接各種數(shù)據(jù)源作為其生產(chǎn)資料;同時漓滔,由于生產(chǎn)數(shù)據(jù)的場景越來越多编饺,覆蓋了線上線下等多渠道,各數(shù)據(jù)生產(chǎn)資料之間也需要進行連接次和,才能形成全域的數(shù)據(jù)反肋;數(shù)據(jù)在數(shù)據(jù)中臺這個平臺上按照標(biāo)準(zhǔn)的模型進行規(guī)范加工處理后需要服務(wù)于多種場景那伐,同樣需要我們提供標(biāo)準(zhǔn)的數(shù)據(jù)服務(wù)接口將數(shù)據(jù)與應(yīng)用場景連接起來踏施。因此石蔗,連接是數(shù)據(jù)中臺的根本能力,也是數(shù)據(jù)中臺的價值所在畅形。

數(shù)據(jù)中臺通過數(shù)據(jù)技術(shù)养距,對海量數(shù)據(jù)進行采集、計算日熬、存儲棍厌、加工,同時統(tǒng)一標(biāo)準(zhǔn)和口徑竖席。

數(shù)據(jù)中臺把數(shù)據(jù)統(tǒng)一之后耘纱,會形成標(biāo)準(zhǔn)數(shù)據(jù),再進行存儲毕荐,形成大數(shù)據(jù)資產(chǎn)層束析,進而為客戶提供高效服務(wù)。這些服務(wù)跟企業(yè)的業(yè)務(wù)有較強關(guān)聯(lián)性憎亚,是這個企業(yè)獨有且能復(fù)用的员寇。

三、數(shù)據(jù)中臺解決什么問題

在數(shù)據(jù)開發(fā)中第美,核心數(shù)據(jù)模型的變化是相對緩慢的蝶锋,同時,對數(shù)據(jù)進行維護的工作量也非常大什往;但業(yè)務(wù)創(chuàng)新的速度扳缕、對數(shù)據(jù)提出的需求的變化,是非潮鹜快速的第献。

數(shù)據(jù)中臺的出現(xiàn),就是為了彌補數(shù)據(jù)開發(fā)和應(yīng)用開發(fā)之間兔港,由于開發(fā)速度不匹配庸毫,出現(xiàn)的響應(yīng)力跟不上的問題。

數(shù)據(jù)中臺解決的問題可以總結(jié)為如下三點:

1衫樊、效率問題:為什么應(yīng)用開發(fā)增加一個報表飒赃,就要十幾天時間?為什么不能實時獲得用戶推薦清單科侈?當(dāng)業(yè)務(wù)人員對數(shù)據(jù)產(chǎn)生一點疑問的時候载佳,需要花費很長的時間,結(jié)果發(fā)現(xiàn)是數(shù)據(jù)源的數(shù)據(jù)變了臀栈,最終影響上線時間蔫慧。

2、協(xié)作問題:當(dāng)業(yè)務(wù)應(yīng)用開發(fā)的時候权薯,雖然和別的項目需求大致差不多姑躲,但因為是別的項目組維護的睡扬,所以數(shù)據(jù)還是要自己再開發(fā)一遍。

3黍析、能力問題:數(shù)據(jù)的處理和維護是一個相對獨立的技術(shù)卖怜,需要相當(dāng)專業(yè)的人來完成,但是很多時候阐枣,我們有一大把的應(yīng)用開發(fā)人員马靠,而數(shù)據(jù)開發(fā)人員很少。

這三類問題都會導(dǎo)致應(yīng)用開發(fā)團隊變慢蔼两。這就是中臺的關(guān)鍵——讓前臺開發(fā)團隊的開發(fā)速度不受后臺數(shù)據(jù)開發(fā)的影響甩鳄。

四、數(shù)據(jù)中臺和數(shù)據(jù)倉庫额划、數(shù)據(jù)平臺的區(qū)別

概括地說娩贷,三者的關(guān)鍵區(qū)別有以下幾方面:

1、數(shù)據(jù)中臺是企業(yè)級的邏輯概念锁孟,體現(xiàn)企業(yè) D2V(Data to Value)的能力彬祖,為業(yè)務(wù)提供服務(wù)的主要方式是數(shù)據(jù) API;

2品抽、數(shù)據(jù)倉庫是一個相對具體的功能概念储笑,是存儲和管理一個或多個主題數(shù)據(jù)的集合,為業(yè)務(wù)提供服務(wù)的方式主要是分析報表圆恤;

3突倍、數(shù)據(jù)平臺是在大數(shù)據(jù)基礎(chǔ)上出現(xiàn)的融合了結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)的數(shù)據(jù)基礎(chǔ)平臺,為業(yè)務(wù)提供服務(wù)的方式主要是直接提供數(shù)據(jù)集盆昙;

4羽历、數(shù)據(jù)中臺距離業(yè)務(wù)更近,為業(yè)務(wù)提供速度更快的服務(wù)淡喜;

5秕磷、數(shù)據(jù)倉庫是為了支持管理決策分析,而數(shù)據(jù)中臺則是將數(shù)據(jù)服務(wù)化之后提供給業(yè)務(wù)系統(tǒng)炼团,不僅限于分析型場景澎嚣,也適用于交易型場景;

6瘟芝、數(shù)據(jù)中臺可以建立在數(shù)據(jù)倉庫和數(shù)據(jù)平臺之上易桃,是加速企業(yè)從數(shù)據(jù)到業(yè)務(wù)價值的過程的中間層。

五锌俱、業(yè)務(wù)中臺和數(shù)據(jù)中臺的關(guān)系

業(yè)務(wù)中臺和數(shù)據(jù)中臺作為“兩個輪子”并肩構(gòu)建了數(shù)字中臺晤郑,支撐前臺對客戶提供從營銷推廣、轉(zhuǎn)化交易到智能服務(wù)業(yè)務(wù)的閉環(huán)服務(wù),促進企業(yè)業(yè)務(wù)的提升和發(fā)展造寝。數(shù)字中臺對內(nèi)連接企業(yè)的后臺系統(tǒng)磕洪,諸如ERP、人力資源匹舞、協(xié)同辦公、財務(wù)管理等线脚。

業(yè)務(wù)中臺抽象赐稽、包裝和整合后臺資源,轉(zhuǎn)化為便于前臺使用的可重用浑侥、可共享的核心能力姊舵,實現(xiàn)了后端業(yè)務(wù)資源到前臺易用能力的轉(zhuǎn)化,為前臺應(yīng)用提供了強大的“炮火支援”寓落,且隨叫隨到括丁。

數(shù)據(jù)中臺接入業(yè)務(wù)中臺、后臺和其他第三方數(shù)據(jù)伶选,完成海量數(shù)據(jù)的存儲史飞、清洗、計算仰税、匯總等构资,構(gòu)成企業(yè)的核心數(shù)據(jù)能力,為前臺基于數(shù)據(jù)的定制化創(chuàng)新和業(yè)務(wù)中臺基于數(shù)據(jù)反饋的持續(xù)演進提供了強大支撐陨簇⊥旅啵可以認(rèn)為數(shù)據(jù)中臺為前臺戰(zhàn)場提供了強大的“雷達監(jiān)測”能力,實時掌控戰(zhàn)場情況河绽,料敵先機己单。

從前臺應(yīng)用角度看,業(yè)務(wù)中臺提供的“炮火支援”和數(shù)據(jù)中臺提供的“雷達監(jiān)測”是一體的耙饰,它們一起組成了支撐業(yè)務(wù)創(chuàng)新的兩個“輪子”纹笼,缺一不可。

六苟跪、數(shù)據(jù)中臺為何如此重要

為什么數(shù)據(jù)中臺如此重要呢允乐,大致有以下四個原因:

1. 回歸服務(wù)的本質(zhì)

浙江移動已經(jīng)將 2000 個基礎(chǔ)模型作為所有數(shù)據(jù)服務(wù)開發(fā)的基礎(chǔ),這些基礎(chǔ)模型做到了 " 書同文削咆,車同軌 "牍疏。

無論應(yīng)用的數(shù)據(jù)模型有多復(fù)雜,總是能溯源到 2000 張基礎(chǔ)表拨齐,這奠定了數(shù)據(jù)核對和認(rèn)知的基礎(chǔ)鳞陨,最大程度地避免了 " 重復(fù)數(shù)據(jù)抽取和維護帶來的成本浪費。"

曾經(jīng)企業(yè)的數(shù)據(jù)抽取就有多份,報表一份厦滤,數(shù)據(jù)倉庫一份援岩,地市集市一份,無論是抽取壓力掏导、維護難度及數(shù)據(jù)一致性要求都很高享怀。

同時,統(tǒng)一的基礎(chǔ)模型將相關(guān)業(yè)務(wù)領(lǐng)域的數(shù)據(jù)做了很好的匯聚趟咆,解決了數(shù)據(jù)互通的訴求添瓷,這一點意義巨大,誰都知道數(shù)據(jù) 1+1>2 的意思值纱。

2. 數(shù)據(jù)中臺需要持續(xù)的業(yè)務(wù)滋養(yǎng)

在企業(yè)內(nèi)鳞贷,無論是專題、報表或取數(shù)虐唠,當(dāng)前基本是煙囪式數(shù)據(jù)生產(chǎn)模式或者是項目制建設(shè)方式搀愧,必然導(dǎo)致數(shù)據(jù)知識得不到沉淀和持續(xù)發(fā)展,從而造成模型不能真正成為可重用的組件疆偿,無法支撐數(shù)據(jù)分析的快速響應(yīng)和創(chuàng)新咱筛。

其實,業(yè)務(wù)最不需要的就是模型的穩(wěn)定杆故,一個數(shù)據(jù)模型如果一味追求穩(wěn)定不變眷蚓,一定程度就是故步自封,這樣的做法必然導(dǎo)致其他新的類似數(shù)據(jù)模型產(chǎn)生反番。

數(shù)據(jù)模型不需要 " 穩(wěn)定 "沙热,而需要不斷的滋養(yǎng),只有在滋養(yǎng)中才能從最初的字段單一到逐漸成長為企業(yè)最為寶貴的模型資產(chǎn)罢缸。

以報表為例篙贸,企業(yè)報表成千上萬的原因往往也是沒有沉淀造成的,針對一個業(yè)務(wù)報表枫疆,由于不同的業(yè)務(wù)人員提出的角度不同爵川,會幻化出成百上千的報表,如果有報表中臺的概念息楔,就可以提出一些基準(zhǔn)報表的原則寝贡。

比如一個業(yè)務(wù)一張報表,已經(jīng)有的業(yè)務(wù)報表只允許修改而不允許新增值依,自然老報表就會由于新的需求而不斷完善圃泡,從而能演化成企業(yè)的基礎(chǔ)報表目錄。

否則就是一堆報表的堆砌愿险,后續(xù)的數(shù)據(jù)一致性問題層出不窮颇蜡,管理成本急劇增加,人力投入越來越多,這樣的事情在每個企業(yè)都在發(fā)生风秤。

3. 數(shù)據(jù)中臺是培育業(yè)務(wù)創(chuàng)新的土壤

企業(yè)的數(shù)據(jù)創(chuàng)新一定要站在巨人的肩膀上鳖目,即從數(shù)據(jù)中臺開始,不能總是從基礎(chǔ)做起缤弦,數(shù)據(jù)中臺是數(shù)據(jù)創(chuàng)新效率的保障领迈。

研究過機器學(xué)習(xí)的都知道,沒有好的規(guī)整數(shù)據(jù)碍沐,數(shù)據(jù)準(zhǔn)備的過程極其冗長狸捅,這也是數(shù)據(jù)倉庫模型的一個核心價值所在,比如運營商中要獲取 3 個月的 ARPU(每用戶平均收入)數(shù)據(jù)抢韭,如果沒有融合模型的支撐薪贫,得自己從賬單一層層匯總及關(guān)聯(lián)恍箭,速度可想而知刻恭。

在如今的互聯(lián)網(wǎng)時代,企業(yè)都在全力謀求轉(zhuǎn)型扯夭,轉(zhuǎn)型的關(guān)鍵是要具備跟互聯(lián)網(wǎng)公司一樣的快速創(chuàng)新能力鳍贾,大數(shù)據(jù)是其中一個核心驅(qū)動力。

但擁有大數(shù)據(jù)還是不夠的交洗,數(shù)據(jù)中臺的能力往往最終決定速度骑科,擁有速度意味著試錯成本很低,意味著可以再來一次构拳。

4. 數(shù)據(jù)中臺是人才成長的搖籃

原來新員工入職要獲得成長咆爽,一是靠人帶,二是找人問置森,三是自己登陸各種系統(tǒng)去看源代碼斗埂,這樣的學(xué)習(xí)比較支離破碎,其實很難了解全貌凫海,無法知道什么東西對于企業(yè)是最重要的呛凶,獲得的文檔資料往往也是過了時的。

現(xiàn)在有了數(shù)據(jù)中臺行贪,很多成長問題就能解決漾稀,有了基礎(chǔ)模型,新人可以系統(tǒng)地學(xué)習(xí)企業(yè)有哪些基本數(shù)據(jù)能力建瘫。

更為關(guān)鍵的是崭捍,數(shù)據(jù)中臺讓新人擺脫了在起步階段對于導(dǎo)師的過度依賴,能快速融入團隊啰脚,在前人的基礎(chǔ)上進行創(chuàng)新缕贡。數(shù)據(jù)中臺天然的統(tǒng)一、集成特性,有可能讓新人打破點線的束縛晾咪,快速構(gòu)筑起自己的知識體系收擦,成為企業(yè)數(shù)據(jù)領(lǐng)域的專家。


文章來源:https://zhuanlan.zhihu.com/p/95550564

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末谍倦,一起剝皮案震驚了整個濱河市塞赂,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌昼蛀,老刑警劉巖宴猾,帶你破解...
    沈念sama閱讀 206,839評論 6 482
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異叼旋,居然都是意外死亡仇哆,警方通過查閱死者的電腦和手機,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,543評論 2 382
  • 文/潘曉璐 我一進店門夫植,熙熙樓的掌柜王于貴愁眉苦臉地迎上來讹剔,“玉大人,你說我怎么就攤上這事详民⊙忧罚” “怎么了?”我有些...
    開封第一講書人閱讀 153,116評論 0 344
  • 文/不壞的土叔 我叫張陵沈跨,是天一觀的道長由捎。 經(jīng)常有香客問我,道長饿凛,這世上最難降的妖魔是什么狞玛? 我笑而不...
    開封第一講書人閱讀 55,371評論 1 279
  • 正文 為了忘掉前任,我火速辦了婚禮涧窒,結(jié)果婚禮上心肪,老公的妹妹穿的比我還像新娘。我一直安慰自己杀狡,他們只是感情好蒙畴,可當(dāng)我...
    茶點故事閱讀 64,384評論 5 374
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著呜象,像睡著了一般膳凝。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上恭陡,一...
    開封第一講書人閱讀 49,111評論 1 285
  • 那天蹬音,我揣著相機與錄音,去河邊找鬼休玩。 笑死著淆,一個胖子當(dāng)著我的面吹牛劫狠,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播永部,決...
    沈念sama閱讀 38,416評論 3 400
  • 文/蒼蘭香墨 我猛地睜開眼独泞,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了苔埋?” 一聲冷哼從身側(cè)響起懦砂,我...
    開封第一講書人閱讀 37,053評論 0 259
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎组橄,沒想到半個月后荞膘,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 43,558評論 1 300
  • 正文 獨居荒郊野嶺守林人離奇死亡玉工,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 36,007評論 2 325
  • 正文 我和宋清朗相戀三年羽资,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片遵班。...
    茶點故事閱讀 38,117評論 1 334
  • 序言:一個原本活蹦亂跳的男人離奇死亡屠升,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出费奸,到底是詐尸還是另有隱情弥激,我是刑警寧澤进陡,帶...
    沈念sama閱讀 33,756評論 4 324
  • 正文 年R本政府宣布愿阐,位于F島的核電站,受9級特大地震影響趾疚,放射性物質(zhì)發(fā)生泄漏缨历。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點故事閱讀 39,324評論 3 307
  • 文/蒙蒙 一糙麦、第九天 我趴在偏房一處隱蔽的房頂上張望辛孵。 院中可真熱鬧,春花似錦赡磅、人聲如沸魄缚。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,315評論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽冶匹。三九已至,卻和暖如春咆瘟,著一層夾襖步出監(jiān)牢的瞬間嚼隘,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 31,539評論 1 262
  • 我被黑心中介騙來泰國打工袒餐, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留飞蛹,地道東北人谤狡。 一個月前我還...
    沈念sama閱讀 45,578評論 2 355
  • 正文 我出身青樓,卻偏偏與公主長得像卧檐,于是被迫代替她去往敵國和親墓懂。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 42,877評論 2 345