數(shù)據(jù)中臺被譽為大數(shù)據(jù)的下一站余耽,由阿里興起缚柏,核心思想是數(shù)據(jù)共享。如今似乎人人都在提數(shù)據(jù)中臺碟贾,但卻不是所有人都清楚數(shù)據(jù)中臺到底意味著什么币喧。
一、什么是中臺
要回答數(shù)據(jù)中臺是什么袱耽,首先要探討一下中臺到底是什么杀餐。中臺,通過對業(yè)務(wù)朱巨、數(shù)據(jù)和技術(shù)的抽象史翘,對服務(wù)能力進行復(fù)用,構(gòu)建了企業(yè)級的服務(wù)能力冀续,消除了企業(yè)內(nèi)部各業(yè)務(wù)部門琼讽、各分子公司之間的壁壘,適應(yīng)了企業(yè)特別是大型企業(yè)集團業(yè)務(wù)多元化的發(fā)展戰(zhàn)略洪唐∽甑牛基于中臺,可快速構(gòu)建面向最終消費者和客戶的前臺應(yīng)用凭需,從而滿足各種個性化特征的前臺需求问欠,為企業(yè)的數(shù)字化轉(zhuǎn)型提供明確的道路肝匆。
從技術(shù)系統(tǒng)層面看,中臺是企業(yè)級共享服務(wù)平臺顺献。傳統(tǒng)的IT系統(tǒng)或套件沒有太多關(guān)注系統(tǒng)能力的復(fù)用和共享旗国,因此企業(yè)在多年的信息化過程中引入和建設(shè)了多套具有重復(fù)功能的煙囪型系統(tǒng)。而中臺則要求對能力進行細(xì)粒度分析注整,識別共享能力粗仓,并將共享能力建設(shè)成統(tǒng)一的平臺。因此中臺不是單系統(tǒng)的服務(wù)化设捐。
綜上所述借浊,中臺是能力的樞紐和對能力的共享。中臺是在集中的基礎(chǔ)上建設(shè)分權(quán)的業(yè)務(wù)萝招,進行聯(lián)通蚂斤,并為各業(yè)務(wù)提供統(tǒng)一的服務(wù)。因此一切將企業(yè)的各式各樣的資源轉(zhuǎn)化為易于前臺使用的能力槐沼,為企業(yè)進行“以用戶為中心”的數(shù)字化轉(zhuǎn)型服務(wù)的平臺曙蒸,都是中臺。
二岗钩、什么是數(shù)據(jù)中臺
數(shù)據(jù)是從業(yè)務(wù)系統(tǒng)產(chǎn)生的纽窟,而業(yè)務(wù)系統(tǒng)也需要數(shù)據(jù)分析的結(jié)果,那么是否可以把業(yè)務(wù)系統(tǒng)的數(shù)據(jù)存儲和計算能力抽離兼吓,由單獨的數(shù)據(jù)處理平臺提供存儲和計算能力臂港?這樣不僅可以簡化業(yè)務(wù)系統(tǒng)的復(fù)雜性,還可以讓各個系統(tǒng)采用更合適的技術(shù)视搏,專注做本身擅長的事审孽。這個專用的數(shù)據(jù)處理平臺即數(shù)據(jù)中臺。
數(shù)據(jù)中臺是一個用技術(shù)連接大數(shù)據(jù)計算存儲能力浑娜,用業(yè)務(wù)連接數(shù)據(jù)應(yīng)用場景能力的平臺佑力。
“連接能力”是數(shù)據(jù)中臺的精髓。作為一個處在中間層的能力平臺筋遭,“連接”是其根本任務(wù)打颤。在業(yè)務(wù)層面需要盡可能連接各種數(shù)據(jù)源作為其生產(chǎn)資料;同時漓滔,由于生產(chǎn)數(shù)據(jù)的場景越來越多编饺,覆蓋了線上線下等多渠道,各數(shù)據(jù)生產(chǎn)資料之間也需要進行連接次和,才能形成全域的數(shù)據(jù)反肋;數(shù)據(jù)在數(shù)據(jù)中臺這個平臺上按照標(biāo)準(zhǔn)的模型進行規(guī)范加工處理后需要服務(wù)于多種場景那伐,同樣需要我們提供標(biāo)準(zhǔn)的數(shù)據(jù)服務(wù)接口將數(shù)據(jù)與應(yīng)用場景連接起來踏施。因此石蔗,連接是數(shù)據(jù)中臺的根本能力,也是數(shù)據(jù)中臺的價值所在畅形。
數(shù)據(jù)中臺通過數(shù)據(jù)技術(shù)养距,對海量數(shù)據(jù)進行采集、計算日熬、存儲棍厌、加工,同時統(tǒng)一標(biāo)準(zhǔn)和口徑竖席。
數(shù)據(jù)中臺把數(shù)據(jù)統(tǒng)一之后耘纱,會形成標(biāo)準(zhǔn)數(shù)據(jù),再進行存儲毕荐,形成大數(shù)據(jù)資產(chǎn)層束析,進而為客戶提供高效服務(wù)。這些服務(wù)跟企業(yè)的業(yè)務(wù)有較強關(guān)聯(lián)性憎亚,是這個企業(yè)獨有且能復(fù)用的员寇。
三、數(shù)據(jù)中臺解決什么問題
在數(shù)據(jù)開發(fā)中第美,核心數(shù)據(jù)模型的變化是相對緩慢的蝶锋,同時,對數(shù)據(jù)進行維護的工作量也非常大什往;但業(yè)務(wù)創(chuàng)新的速度扳缕、對數(shù)據(jù)提出的需求的變化,是非潮鹜快速的第献。
數(shù)據(jù)中臺的出現(xiàn),就是為了彌補數(shù)據(jù)開發(fā)和應(yīng)用開發(fā)之間兔港,由于開發(fā)速度不匹配庸毫,出現(xiàn)的響應(yīng)力跟不上的問題。
數(shù)據(jù)中臺解決的問題可以總結(jié)為如下三點:
1衫樊、效率問題:為什么應(yīng)用開發(fā)增加一個報表飒赃,就要十幾天時間?為什么不能實時獲得用戶推薦清單科侈?當(dāng)業(yè)務(wù)人員對數(shù)據(jù)產(chǎn)生一點疑問的時候载佳,需要花費很長的時間,結(jié)果發(fā)現(xiàn)是數(shù)據(jù)源的數(shù)據(jù)變了臀栈,最終影響上線時間蔫慧。
2、協(xié)作問題:當(dāng)業(yè)務(wù)應(yīng)用開發(fā)的時候权薯,雖然和別的項目需求大致差不多姑躲,但因為是別的項目組維護的睡扬,所以數(shù)據(jù)還是要自己再開發(fā)一遍。
3黍析、能力問題:數(shù)據(jù)的處理和維護是一個相對獨立的技術(shù)卖怜,需要相當(dāng)專業(yè)的人來完成,但是很多時候阐枣,我們有一大把的應(yīng)用開發(fā)人員马靠,而數(shù)據(jù)開發(fā)人員很少。
這三類問題都會導(dǎo)致應(yīng)用開發(fā)團隊變慢蔼两。這就是中臺的關(guān)鍵——讓前臺開發(fā)團隊的開發(fā)速度不受后臺數(shù)據(jù)開發(fā)的影響甩鳄。
四、數(shù)據(jù)中臺和數(shù)據(jù)倉庫额划、數(shù)據(jù)平臺的區(qū)別
概括地說娩贷,三者的關(guān)鍵區(qū)別有以下幾方面:
1、數(shù)據(jù)中臺是企業(yè)級的邏輯概念锁孟,體現(xiàn)企業(yè) D2V(Data to Value)的能力彬祖,為業(yè)務(wù)提供服務(wù)的主要方式是數(shù)據(jù) API;
2品抽、數(shù)據(jù)倉庫是一個相對具體的功能概念储笑,是存儲和管理一個或多個主題數(shù)據(jù)的集合,為業(yè)務(wù)提供服務(wù)的方式主要是分析報表圆恤;
3突倍、數(shù)據(jù)平臺是在大數(shù)據(jù)基礎(chǔ)上出現(xiàn)的融合了結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)的數(shù)據(jù)基礎(chǔ)平臺,為業(yè)務(wù)提供服務(wù)的方式主要是直接提供數(shù)據(jù)集盆昙;
4羽历、數(shù)據(jù)中臺距離業(yè)務(wù)更近,為業(yè)務(wù)提供速度更快的服務(wù)淡喜;
5秕磷、數(shù)據(jù)倉庫是為了支持管理決策分析,而數(shù)據(jù)中臺則是將數(shù)據(jù)服務(wù)化之后提供給業(yè)務(wù)系統(tǒng)炼团,不僅限于分析型場景澎嚣,也適用于交易型場景;
6瘟芝、數(shù)據(jù)中臺可以建立在數(shù)據(jù)倉庫和數(shù)據(jù)平臺之上易桃,是加速企業(yè)從數(shù)據(jù)到業(yè)務(wù)價值的過程的中間層。
五锌俱、業(yè)務(wù)中臺和數(shù)據(jù)中臺的關(guān)系
業(yè)務(wù)中臺和數(shù)據(jù)中臺作為“兩個輪子”并肩構(gòu)建了數(shù)字中臺晤郑,支撐前臺對客戶提供從營銷推廣、轉(zhuǎn)化交易到智能服務(wù)業(yè)務(wù)的閉環(huán)服務(wù),促進企業(yè)業(yè)務(wù)的提升和發(fā)展造寝。數(shù)字中臺對內(nèi)連接企業(yè)的后臺系統(tǒng)磕洪,諸如ERP、人力資源匹舞、協(xié)同辦公、財務(wù)管理等线脚。
業(yè)務(wù)中臺抽象赐稽、包裝和整合后臺資源,轉(zhuǎn)化為便于前臺使用的可重用浑侥、可共享的核心能力姊舵,實現(xiàn)了后端業(yè)務(wù)資源到前臺易用能力的轉(zhuǎn)化,為前臺應(yīng)用提供了強大的“炮火支援”寓落,且隨叫隨到括丁。
數(shù)據(jù)中臺接入業(yè)務(wù)中臺、后臺和其他第三方數(shù)據(jù)伶选,完成海量數(shù)據(jù)的存儲史飞、清洗、計算仰税、匯總等构资,構(gòu)成企業(yè)的核心數(shù)據(jù)能力,為前臺基于數(shù)據(jù)的定制化創(chuàng)新和業(yè)務(wù)中臺基于數(shù)據(jù)反饋的持續(xù)演進提供了強大支撐陨簇⊥旅啵可以認(rèn)為數(shù)據(jù)中臺為前臺戰(zhàn)場提供了強大的“雷達監(jiān)測”能力,實時掌控戰(zhàn)場情況河绽,料敵先機己单。
從前臺應(yīng)用角度看,業(yè)務(wù)中臺提供的“炮火支援”和數(shù)據(jù)中臺提供的“雷達監(jiān)測”是一體的耙饰,它們一起組成了支撐業(yè)務(wù)創(chuàng)新的兩個“輪子”纹笼,缺一不可。
六苟跪、數(shù)據(jù)中臺為何如此重要
為什么數(shù)據(jù)中臺如此重要呢允乐,大致有以下四個原因:
1. 回歸服務(wù)的本質(zhì)
浙江移動已經(jīng)將 2000 個基礎(chǔ)模型作為所有數(shù)據(jù)服務(wù)開發(fā)的基礎(chǔ),這些基礎(chǔ)模型做到了 " 書同文削咆,車同軌 "牍疏。
無論應(yīng)用的數(shù)據(jù)模型有多復(fù)雜,總是能溯源到 2000 張基礎(chǔ)表拨齐,這奠定了數(shù)據(jù)核對和認(rèn)知的基礎(chǔ)鳞陨,最大程度地避免了 " 重復(fù)數(shù)據(jù)抽取和維護帶來的成本浪費。"
曾經(jīng)企業(yè)的數(shù)據(jù)抽取就有多份,報表一份厦滤,數(shù)據(jù)倉庫一份援岩,地市集市一份,無論是抽取壓力掏导、維護難度及數(shù)據(jù)一致性要求都很高享怀。
同時,統(tǒng)一的基礎(chǔ)模型將相關(guān)業(yè)務(wù)領(lǐng)域的數(shù)據(jù)做了很好的匯聚趟咆,解決了數(shù)據(jù)互通的訴求添瓷,這一點意義巨大,誰都知道數(shù)據(jù) 1+1>2 的意思值纱。
2. 數(shù)據(jù)中臺需要持續(xù)的業(yè)務(wù)滋養(yǎng)
在企業(yè)內(nèi)鳞贷,無論是專題、報表或取數(shù)虐唠,當(dāng)前基本是煙囪式數(shù)據(jù)生產(chǎn)模式或者是項目制建設(shè)方式搀愧,必然導(dǎo)致數(shù)據(jù)知識得不到沉淀和持續(xù)發(fā)展,從而造成模型不能真正成為可重用的組件疆偿,無法支撐數(shù)據(jù)分析的快速響應(yīng)和創(chuàng)新咱筛。
其實,業(yè)務(wù)最不需要的就是模型的穩(wěn)定杆故,一個數(shù)據(jù)模型如果一味追求穩(wěn)定不變眷蚓,一定程度就是故步自封,這樣的做法必然導(dǎo)致其他新的類似數(shù)據(jù)模型產(chǎn)生反番。
數(shù)據(jù)模型不需要 " 穩(wěn)定 "沙热,而需要不斷的滋養(yǎng),只有在滋養(yǎng)中才能從最初的字段單一到逐漸成長為企業(yè)最為寶貴的模型資產(chǎn)罢缸。
以報表為例篙贸,企業(yè)報表成千上萬的原因往往也是沒有沉淀造成的,針對一個業(yè)務(wù)報表枫疆,由于不同的業(yè)務(wù)人員提出的角度不同爵川,會幻化出成百上千的報表,如果有報表中臺的概念息楔,就可以提出一些基準(zhǔn)報表的原則寝贡。
比如一個業(yè)務(wù)一張報表,已經(jīng)有的業(yè)務(wù)報表只允許修改而不允許新增值依,自然老報表就會由于新的需求而不斷完善圃泡,從而能演化成企業(yè)的基礎(chǔ)報表目錄。
否則就是一堆報表的堆砌愿险,后續(xù)的數(shù)據(jù)一致性問題層出不窮颇蜡,管理成本急劇增加,人力投入越來越多,這樣的事情在每個企業(yè)都在發(fā)生风秤。
3. 數(shù)據(jù)中臺是培育業(yè)務(wù)創(chuàng)新的土壤
企業(yè)的數(shù)據(jù)創(chuàng)新一定要站在巨人的肩膀上鳖目,即從數(shù)據(jù)中臺開始,不能總是從基礎(chǔ)做起缤弦,數(shù)據(jù)中臺是數(shù)據(jù)創(chuàng)新效率的保障领迈。
研究過機器學(xué)習(xí)的都知道,沒有好的規(guī)整數(shù)據(jù)碍沐,數(shù)據(jù)準(zhǔn)備的過程極其冗長狸捅,這也是數(shù)據(jù)倉庫模型的一個核心價值所在,比如運營商中要獲取 3 個月的 ARPU(每用戶平均收入)數(shù)據(jù)抢韭,如果沒有融合模型的支撐薪贫,得自己從賬單一層層匯總及關(guān)聯(lián)恍箭,速度可想而知刻恭。
在如今的互聯(lián)網(wǎng)時代,企業(yè)都在全力謀求轉(zhuǎn)型扯夭,轉(zhuǎn)型的關(guān)鍵是要具備跟互聯(lián)網(wǎng)公司一樣的快速創(chuàng)新能力鳍贾,大數(shù)據(jù)是其中一個核心驅(qū)動力。
但擁有大數(shù)據(jù)還是不夠的交洗,數(shù)據(jù)中臺的能力往往最終決定速度骑科,擁有速度意味著試錯成本很低,意味著可以再來一次构拳。
4. 數(shù)據(jù)中臺是人才成長的搖籃
原來新員工入職要獲得成長咆爽,一是靠人帶,二是找人問置森,三是自己登陸各種系統(tǒng)去看源代碼斗埂,這樣的學(xué)習(xí)比較支離破碎,其實很難了解全貌凫海,無法知道什么東西對于企業(yè)是最重要的呛凶,獲得的文檔資料往往也是過了時的。
現(xiàn)在有了數(shù)據(jù)中臺行贪,很多成長問題就能解決漾稀,有了基礎(chǔ)模型,新人可以系統(tǒng)地學(xué)習(xí)企業(yè)有哪些基本數(shù)據(jù)能力建瘫。
更為關(guān)鍵的是崭捍,數(shù)據(jù)中臺讓新人擺脫了在起步階段對于導(dǎo)師的過度依賴,能快速融入團隊啰脚,在前人的基礎(chǔ)上進行創(chuàng)新缕贡。數(shù)據(jù)中臺天然的統(tǒng)一、集成特性,有可能讓新人打破點線的束縛晾咪,快速構(gòu)筑起自己的知識體系收擦,成為企業(yè)數(shù)據(jù)領(lǐng)域的專家。
文章來源:https://zhuanlan.zhihu.com/p/95550564