數(shù)據(jù)中臺買的來么郑气?

在阿里的推動下,大數(shù)據(jù)借數(shù)據(jù)中臺概念在企業(yè)級市場腰池,又火了起來尾组,而且有越來越火的趨勢忙芒。越來越多的供應(yīng)商也在陸續(xù)推出相關(guān)的數(shù)據(jù)中臺產(chǎn)品。那么數(shù)據(jù)中臺買的來么讳侨?各位看官別急匕争,先吃點別的瓜哈:

數(shù)據(jù)體系建設(shè)的意義

大型企業(yè)數(shù)字化轉(zhuǎn)型的核心是利用網(wǎng)絡(luò)協(xié)同效應(yīng)和數(shù)據(jù)智能,賦能業(yè)務(wù)創(chuàng)造更多的用戶價值爷耀。但是網(wǎng)絡(luò)效應(yīng)和業(yè)務(wù)類型強(qiáng)相關(guān)甘桑,強(qiáng)大如Uber、滴滴受業(yè)務(wù)所限也僅僅只能做到規(guī)模效應(yīng)歹叮,各類產(chǎn)業(yè)企業(yè)就更不用說跑杭。因此對于大型產(chǎn)業(yè)企業(yè)來講,建立適合自身的數(shù)據(jù)體系從而持續(xù)產(chǎn)出數(shù)據(jù)智能咆耿,是更加確定性的事情德谅,也更值得堅定投入。


雙輪驅(qū)動的超級企業(yè)

數(shù)據(jù)中臺的背后

結(jié)合在阿里和滴滴的工作經(jīng)驗萨螺,來談?wù)剶?shù)據(jù)中臺的成軍歷史和背后的體系經(jīng)驗:

這張圖是阿里數(shù)據(jù)中臺的整體結(jié)構(gòu)圖:

阿里巴巴數(shù)據(jù)中臺構(gòu)成

這個圖清晰的展示了阿里數(shù)據(jù)中臺的系統(tǒng)構(gòu)成窄做、核心的數(shù)據(jù)架構(gòu)體系以及數(shù)據(jù)價值的輸出方式。阿里持續(xù)投入了10年慰技,歷經(jīng)多次變革才做到椭盏,它背后的演進(jìn)歷史與業(yè)務(wù)挑戰(zhàn)是具有相當(dāng)代表性的:

數(shù)據(jù)的四化與挑戰(zhàn)

業(yè)務(wù)信息化

阿里很幸運,作為原生的數(shù)字化企業(yè)吻商,沒有老業(yè)務(wù)的包袱掏颊,加上中國的工程師紅利,它天生就是信息化的艾帐,一上來就躍上了第二個臺階乌叶。滴滴更幸運,借助智能手機(jī)的快速普及柒爸,完成了位置業(yè)務(wù)的信息化准浴,順勢而為從而一飛沖天。

信息數(shù)據(jù)化

伴隨企業(yè)業(yè)務(wù)高速發(fā)展捎稚,產(chǎn)生對BI和數(shù)據(jù)產(chǎn)品的強(qiáng)勁需求乐横,初階但是繁雜,依靠開源生態(tài)尤其是Hadoop紅利阳藻,讓頂部的互聯(lián)網(wǎng)企業(yè)趟過了這個階段晰奖,中間的苦和累,我相信只有在幾個大廠做過數(shù)據(jù)平臺和系統(tǒng)的人才能深深體會腥泥。

以阿里為例,在馬云和曾鳴的決策下啃匿,將數(shù)據(jù)的重要性提到了當(dāng)時前所未有的高度蛔外,并持續(xù)真金白銀的投入蛆楞,同時一位位數(shù)據(jù)起夜家(阿里對每天晚上處理數(shù)據(jù)異常與故障的數(shù)據(jù)工程師的戲謔稱呼),沉淀出了阿里底層的計算和存儲平臺夹厌,打磨出了更為貼近數(shù)據(jù)工程人員需求的數(shù)據(jù)集成研發(fā)平臺和管理平臺豹爹,同時還打造了阿里寶貴又獨特的數(shù)據(jù)文化。數(shù)據(jù)建設(shè):廟堂與江湖缺一不可矛纹。

數(shù)據(jù)資產(chǎn)化

當(dāng)淘寶決定把Oracle Rac廢掉臂聋,意味著淘內(nèi)數(shù)據(jù)使用繁榮的開始。高速的大繁榮意味著混亂或南,也意味著機(jī)會:從數(shù)據(jù)集到工具孩等,到平臺,到產(chǎn)品變現(xiàn)采够,到團(tuán)隊都是野蠻快速生長的過程肄方,野蠻生長的代價之一就是一致性的缺失,這驅(qū)動出了阿里的TCIF蹬癌,后來成為One Data體系中重要的部分权她。進(jìn)而發(fā)展為數(shù)據(jù)打通、整合逝薪、梳理隅要、集成的資產(chǎn)化管理。

而正是從這個階段開始董济,數(shù)據(jù)從一個技術(shù)為主導(dǎo)的問題演變成了企業(yè)的管理和組織為主導(dǎo)的問題拾徙,如果沒有處理好這個轉(zhuǎn)變,基于數(shù)據(jù)帶來的團(tuán)隊間的撕扯感局、業(yè)務(wù)間的詬病和系統(tǒng)間的浪費會接踵而至尼啡,因此數(shù)據(jù)的資產(chǎn)化背后其實是企業(yè)面對新生生產(chǎn)資料-數(shù)據(jù)是否能夠找到適合自身的管理策略和組織文化的過程,缺乏實戰(zhàn)經(jīng)驗的咨詢公司和大數(shù)據(jù)平臺供應(yīng)商询微,把這個問題簡化為狹義的數(shù)據(jù)治理崖瞭,是存在問題的。

資產(chǎn)變現(xiàn)化

在各種BI場景和數(shù)據(jù)產(chǎn)品萬馬奔騰之下撑毛,用戶增長場景的價值一支獨秀书聚,如果企業(yè)媒體屬性足夠大,還能產(chǎn)生出精準(zhǔn)營銷業(yè)務(wù)藻雌,這意味著數(shù)據(jù)從賦能員工做決策雌续,開始長出牙齒變成算法服務(wù)大規(guī)模的直接服務(wù)用戶,阿里媽媽就是這匹長出獠牙的數(shù)據(jù)智能之狼胯杭。阿里生態(tài)系統(tǒng)驯杜,終于誕生了一個三贏的利益分配機(jī)制(消費者、平臺做个、商家)鸽心,數(shù)據(jù)功不可沒滚局。數(shù)據(jù)賦能出的各種高大上AI算法,即便強(qiáng)大如Uber顽频、滴滴的調(diào)度和匹配算法藤肢,我認(rèn)為這些都遠(yuǎn)不如阿里媽媽這個利益分配算法體系偉大,當(dāng)然原創(chuàng)在Google糯景。

AI在圖像嘁圈、語音和視頻的全面突破,徹底將企業(yè)對非結(jié)構(gòu)化數(shù)據(jù)處理的能力提到了一個新的臺階蟀淮,此前這些數(shù)據(jù)的處理全部是要依靠人工的最住,帶來的效率飛升將帶來各種產(chǎn)業(yè)的巨變。

第二輪數(shù)據(jù)四化已到來

阿里在電商業(yè)務(wù)驅(qū)動下灭贷,完成第一輪數(shù)據(jù)四化循環(huán)温学。而這三年阿里的新零售和阿里云的智慧城市,我理解就是在AI和IoT技術(shù)變革下進(jìn)行的第二輪數(shù)據(jù)四化循環(huán)甚疟。我們一起搬好凳子看看阿里在產(chǎn)業(yè)的信息化和數(shù)據(jù)化會演繹一出怎樣的好戲吧:怎么依靠阿里人的智慧來解決物聯(lián)網(wǎng)碎片化仗岖、傳統(tǒng)產(chǎn)業(yè)難以在線化的大難題!夢想還是要有的览妖,萬一實現(xiàn)了呢轧拄?

那數(shù)據(jù)中臺買的來么?

數(shù)據(jù)中臺是企業(yè)利用大數(shù)據(jù)技術(shù)讽膏,以可快速復(fù)用和組合搭建為目標(biāo)檩电,進(jìn)行數(shù)據(jù)服務(wù)建設(shè)的結(jié)果。北洋水師的恥辱相信每個中國人都還記得府树,尤其是堅船利炮上晾曬衣服的水兵形象俐末。武器能外購,兵法可學(xué)習(xí)奄侠,但是勝利一定來自適合本國軍隊的軍事理論和練兵實戰(zhàn)的知行合一體系卓箫。

所以說,數(shù)據(jù)中臺哪有這么容易垄潮。相信數(shù)據(jù)中臺買來開箱即用的人烹卒,可能是無知無畏,更多是非傻即壞弯洗。

數(shù)據(jù)中臺買不來

下集預(yù)告:

阿里數(shù)據(jù)體系有破綻旅急?

阿里數(shù)據(jù)中臺背后的數(shù)據(jù)體系,我認(rèn)為有兩個破綻:

1. 以ETL為內(nèi)核造成的復(fù)雜性牡整,復(fù)雜到對軟件工程方法論的不兼容藐吮,不能較好的融入到業(yè)務(wù)平臺的軟件工程體系,對于大型以下企業(yè)的借鑒成本太高

2. 數(shù)據(jù)建設(shè)的集權(quán)屬性太強(qiáng),強(qiáng)大到對創(chuàng)新的抑制

中臺思想的一個問題就是持續(xù)的中央集權(quán)炎码,建立破除黃宗羲定律的機(jī)制是非常必要的盟迟。在今后數(shù)據(jù)秋泳、AI服務(wù)平民化的趨勢下潦闲,越來越多的數(shù)據(jù)密集型智能應(yīng)用開發(fā)會成為主流,這種不融合與大集中會造成問題的迫皱。

數(shù)據(jù)體系建設(shè)困難的原因

1. 企業(yè)對數(shù)據(jù)的使用早就不是建數(shù)倉歉闰、做報表了,是各個部門各個層級各個角色對可靠數(shù)據(jù)支援的巨大需求卓起。怎么建立適合企業(yè)自身組織特點的多方需求服務(wù)機(jī)制和敬?怎么建立任督通暢的數(shù)據(jù)流通體系?

2. 業(yè)務(wù)對于數(shù)據(jù)的需求是:快戏阅、準(zhǔn)昼弟、省奕筐;正是效率舱痘、質(zhì)量、成本這個‘不可能’三角离赫,讓數(shù)據(jù)團(tuán)隊如履薄冰芭逝!

3. 數(shù)據(jù)是業(yè)務(wù)穩(wěn)定生產(chǎn)和創(chuàng)新的必要條件,但是這個導(dǎo)致的集權(quán)與分治的矛盾很難解決

數(shù)據(jù)體系建設(shè)死叉

精益數(shù)據(jù)體系

汽車工業(yè)也許是人類目前構(gòu)建的鏈路最為復(fù)雜渊胸、穩(wěn)定性要求最為苛刻的工業(yè)制造體系旬盯,豐田倡導(dǎo)的精益制造思想是非常值得數(shù)據(jù)工程學(xué)習(xí)的,因為數(shù)據(jù)的加工生產(chǎn)過程和質(zhì)量要求翎猛,和汽車的生產(chǎn)協(xié)作鏈路是如此相近胖翰。

近20年成熟的敏捷軟件研發(fā)體系,尤其是近年來的DevOps體系切厘,讓軟件產(chǎn)業(yè)的效率萨咳、質(zhì)量、成本和創(chuàng)新都取得了較好的進(jìn)步迂卢。DevOps背后:一切皆代碼為基礎(chǔ)思想某弦,快速迭代創(chuàng)新、測試驅(qū)動而克、持續(xù)集成靶壮、持續(xù)測試、持續(xù)交付的開發(fā)流水線是非常值得數(shù)據(jù)工程融入其中的员萍。

因此以精益和敏捷為思想基礎(chǔ)腾降,構(gòu)建了下面的精益數(shù)據(jù)體系方法論:

精益數(shù)據(jù)價值屋

精益數(shù)據(jù)體系的具體解釋,滴滴實踐和成效分享(下集待續(xù))

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末碎绎,一起剝皮案震驚了整個濱河市螃壤,隨后出現(xiàn)的幾起案子抗果,更是在濱河造成了極大的恐慌,老刑警劉巖奸晴,帶你破解...
    沈念sama閱讀 216,692評論 6 501
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件冤馏,死亡現(xiàn)場離奇詭異,居然都是意外死亡寄啼,警方通過查閱死者的電腦和手機(jī)逮光,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,482評論 3 392
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來墩划,“玉大人涕刚,你說我怎么就攤上這事∫野铮” “怎么了杜漠?”我有些...
    開封第一講書人閱讀 162,995評論 0 353
  • 文/不壞的土叔 我叫張陵,是天一觀的道長察净。 經(jīng)常有香客問我驾茴,道長,這世上最難降的妖魔是什么塞绿? 我笑而不...
    開封第一講書人閱讀 58,223評論 1 292
  • 正文 為了忘掉前任沟涨,我火速辦了婚禮,結(jié)果婚禮上异吻,老公的妹妹穿的比我還像新娘裹赴。我一直安慰自己,他們只是感情好诀浪,可當(dāng)我...
    茶點故事閱讀 67,245評論 6 388
  • 文/花漫 我一把揭開白布棋返。 她就那樣靜靜地躺著,像睡著了一般雷猪。 火紅的嫁衣襯著肌膚如雪睛竣。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 51,208評論 1 299
  • 那天求摇,我揣著相機(jī)與錄音射沟,去河邊找鬼。 笑死与境,一個胖子當(dāng)著我的面吹牛验夯,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播摔刁,決...
    沈念sama閱讀 40,091評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼挥转,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起绑谣,我...
    開封第一講書人閱讀 38,929評論 0 274
  • 序言:老撾萬榮一對情侶失蹤党窜,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后借宵,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體幌衣,經(jīng)...
    沈念sama閱讀 45,346評論 1 311
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 37,570評論 2 333
  • 正文 我和宋清朗相戀三年暇务,在試婚紗的時候發(fā)現(xiàn)自己被綠了泼掠。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片怔软。...
    茶點故事閱讀 39,739評論 1 348
  • 序言:一個原本活蹦亂跳的男人離奇死亡垦细,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出挡逼,到底是詐尸還是另有隱情括改,我是刑警寧澤,帶...
    沈念sama閱讀 35,437評論 5 344
  • 正文 年R本政府宣布家坎,位于F島的核電站嘱能,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏虱疏。R本人自食惡果不足惜惹骂,卻給世界環(huán)境...
    茶點故事閱讀 41,037評論 3 326
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望做瞪。 院中可真熱鬧对粪,春花似錦、人聲如沸装蓬。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,677評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽牍帚。三九已至儡遮,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間暗赶,已是汗流浹背鄙币。 一陣腳步聲響...
    開封第一講書人閱讀 32,833評論 1 269
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機(jī)就差點兒被人妖公主榨干…… 1. 我叫王不留蹂随,地道東北人十嘿。 一個月前我還...
    沈念sama閱讀 47,760評論 2 369
  • 正文 我出身青樓,卻偏偏與公主長得像糙及,于是被迫代替她去往敵國和親详幽。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 44,647評論 2 354

推薦閱讀更多精彩內(nèi)容

  • 文章發(fā)布于公號【數(shù)智物語】 (ID:decision_engine),關(guān)注公號不錯過每一篇干貨唇聘。 轉(zhuǎn)自 | Tho...
    數(shù)智物語閱讀 1,807評論 0 15
  • 本文從概念和理論上進(jìn)行整理學(xué)習(xí) 數(shù)據(jù)中臺是什么 主流概念上講 數(shù)據(jù)中臺是指通過數(shù)據(jù)技術(shù)版姑,對海量數(shù)據(jù)進(jìn)行采集、計算迟郎、...
    李小李的路閱讀 3,338評論 0 31
  • 總是向你索取 卻不曾說謝謝你剥险,直到長大以后 才懂得你不容易,每次離開總是 裝作輕松的樣子宪肖,微笑著說回去吧 轉(zhuǎn)身淚濕...
    wilssy閱讀 856評論 16 20
  • 我養(yǎng)過一條大黃狗(中英雙語) 原創(chuàng):斧子的二當(dāng)家漢語故事2月18日 我養(yǎng)過一條大黃狗 I had a big ye...
    漢語故事閱讀 1,054評論 0 0
  • 那些可在隨處集結(jié)的飛行者 一窩蜂的軍團(tuán) 鋒芒畢露 一根木棍 無意發(fā)起了喧囂的挑戰(zhàn) 不容思想 人已成為饅頭包 哭喪著...
    深海心空閱讀 185評論 0 0