以下文章來源于談數(shù)據(jù)?蜘犁,作者石秀峰
“數(shù)據(jù)治理”這個10多年前就已經(jīng)出現(xiàn)的名稱翰苫,在最近這幾年時間一下子火了起來。不知何時这橙,江湖中流傳出了:“數(shù)字轉(zhuǎn)型奏窑、治理先行”的說法。
于是乎屈扎,我們看到:不僅是傳統(tǒng)提供數(shù)據(jù)倉庫埃唯、BI、主數(shù)據(jù)管理鹰晨、元數(shù)據(jù)管理墨叛、數(shù)據(jù)集成等數(shù)據(jù)服務(wù)的軟件供應(yīng)商在說數(shù)據(jù)治理,“BATJ”等互聯(lián)網(wǎng)公司模蜡,大型國企巍实、央企也都在談數(shù)據(jù)治理,很多企業(yè)都將數(shù)據(jù)治理作為數(shù)字化戰(zhàn)略的一項必要舉措哩牍,列入了企業(yè)的戰(zhàn)略行動計劃。
在眾多談?wù)摂?shù)據(jù)治理的企業(yè)或個人中令漂,筆者發(fā)現(xiàn)大家對數(shù)據(jù)治理有著一個普遍的共識膝昆,那就是:“數(shù)據(jù)治理說起來容易,做起來難”叠必!
? 為什么要做數(shù)據(jù)治理荚孵,真的想透了嗎??
在做數(shù)據(jù)治理咨詢的過程中纬朝,經(jīng)常會遇到以下對話場景:
請問你們?yōu)槭裁匆鰯?shù)據(jù)治理收叶?常見回答:我們要建立數(shù)據(jù)標準,提升數(shù)據(jù)質(zhì)量共苛,實現(xiàn)數(shù)據(jù)資產(chǎn)統(tǒng)一管理判没。
接著問:為什么要建立數(shù)據(jù)標準蜓萄、提升數(shù)據(jù)質(zhì)量,不做會怎樣澄峰?常見回答:數(shù)據(jù)質(zhì)量問題比較多嫉沽,無法提供準確的數(shù)據(jù)報表,影響業(yè)務(wù)效率俏竞,無法支撐企業(yè)的數(shù)字化轉(zhuǎn)型绸硕。
再次問:都影響到了哪些數(shù)據(jù)報表、哪些業(yè)務(wù)魂毁?常見回答:XX報表不準確玻佩、統(tǒng)計口徑不一致、系統(tǒng)之間數(shù)據(jù)孤島席楚,數(shù)據(jù)集成困難……吧啦吧啦……
接著追問:為什么會造成數(shù)據(jù)報表不準確咬崔,口徑不一致,系統(tǒng)集成難酣胀?常見回答:因為數(shù)據(jù)標準一致刁赦,數(shù)據(jù)源的數(shù)據(jù)質(zhì)量差。
到此為止闻镶,采用咨詢常用的5Why分析法甚脉,似乎已經(jīng)get出了數(shù)據(jù)治理的現(xiàn)狀和目標。我們將其總結(jié)下:通過數(shù)據(jù)治理實現(xiàn)企業(yè)數(shù)據(jù)的標準化铆农、提高數(shù)據(jù)質(zhì)量牺氨、提升業(yè)務(wù)處理的效率,為數(shù)據(jù)分析提供準確的數(shù)據(jù)支撐墩剖,賦能業(yè)務(wù)猴凹,助力企業(yè)實現(xiàn)數(shù)字化轉(zhuǎn)型。
但是岭皂,我們仔細分析這樣的調(diào)研結(jié)果是浮于表面的郊霎,圍繞數(shù)據(jù)的問題在原地打轉(zhuǎn),沒有將為什么要做數(shù)據(jù)治理真正想透爷绘。
數(shù)據(jù)要產(chǎn)生價值书劝,需要一個合理的“業(yè)務(wù)目標”,數(shù)據(jù)治理的所有活動應(yīng)該圍繞真實的業(yè)務(wù)目標而開展土至,建立數(shù)據(jù)標準购对、提升數(shù)據(jù)質(zhì)量只是手段,而不是目標陶因。因此數(shù)據(jù)治理的第一步不是分析數(shù)據(jù)問題骡苞,而是分析業(yè)務(wù)問題,找到企業(yè)的核心業(yè)務(wù)訴求,定義數(shù)據(jù)治理的目標和范圍解幽。
?數(shù)據(jù)治理不是什么高大上的東西贴见,基本是臟活、累活亚铁!?
數(shù)據(jù)治理很火蝇刀,在DAMA 數(shù)據(jù)管理知識體系指南中,數(shù)據(jù)治理位于數(shù)據(jù)管理“車輪圖”的正中央徘溢,是數(shù)據(jù)架構(gòu)吞琐、數(shù)據(jù)建模、數(shù)據(jù)存儲然爆、數(shù)據(jù)安全站粟、數(shù)據(jù)質(zhì)量、元數(shù)據(jù)管理曾雕、主數(shù)據(jù)管理等10大數(shù)據(jù)管理領(lǐng)域的總綱奴烙,為各項數(shù)據(jù)管理活動提供總體指導策略。
DAMA-DMBOK2.0 數(shù)據(jù)管理車輪圖
談到數(shù)據(jù)治理剖张,我們經(jīng)常講它是一個涉及到企業(yè)戰(zhàn)略切诀、組織架構(gòu)、數(shù)據(jù)標準搔弄、管理規(guī)范幅虑、數(shù)據(jù)文化、技術(shù)工具的一個綜合體顾犹。沒有數(shù)據(jù)治理實踐經(jīng)驗的倒庵,一定會認為:哇,數(shù)據(jù)治理好“高大上”呀炫刷!又是戰(zhàn)略擎宝、又是標準、又是文化的浑玛,聽起來很高深嗎绍申!
然而,只有你真正做過數(shù)據(jù)治理人才知道:數(shù)據(jù)治理不僅都是苦活顾彰、累活失晴,還是個受累不討好,經(jīng)常背鍋拘央,領(lǐng)導看不見價值的活。
都說數(shù)據(jù)是資產(chǎn)书在,數(shù)據(jù)治理很重要灰伟。盡快大家都說數(shù)據(jù)治理很重要,領(lǐng)導也很重視,但在很多企業(yè)真正實施的過程中栏账,卻總會遇到高層領(lǐng)導支持力度不足帖族,業(yè)務(wù)部門人員配合不到位,數(shù)據(jù)治理的總是要給業(yè)務(wù)讓路等等問題挡爵。究其原因:領(lǐng)導說重視數(shù)據(jù)竖般,是真重視,還是嘴上說說茶鹃?有沒有將其納入企業(yè)的戰(zhàn)略行動計劃涣雕?
數(shù)據(jù)治理要定戰(zhàn)略、定制度闭翩、建組織挣郭,這是頂層策略,這每一項都牽一發(fā)而動全身疗韵,都需要高層領(lǐng)導的大力支持和推動兑障,業(yè)務(wù)部門和技術(shù)部門的緊密協(xié)同。
數(shù)據(jù)治理要立標準蕉汪、理流程流译、清數(shù)據(jù),需要對每個數(shù)據(jù)域者疤、數(shù)據(jù)實體福澡、數(shù)據(jù)條目、數(shù)據(jù)項進行梳理和標準化宛渐,甚至有時候需要人工逐條竞漾、逐字段的定義數(shù)據(jù)標準、核實數(shù)據(jù)質(zhì)量窥翩。數(shù)據(jù)治理人員不僅要有良好的數(shù)據(jù)思維业岁,還要有足夠的細心、耐心和體力才能實現(xiàn)企業(yè)數(shù)據(jù)質(zhì)量的不斷提升寇蚊,打磨出適合企業(yè)的數(shù)據(jù)標準笔时。
數(shù)據(jù)治理過程中,有時候是不被理解的仗岸。數(shù)據(jù)治理是個地基性工程允耿,人們看到的永遠是數(shù)據(jù)應(yīng)用的“高樓大廈”,數(shù)據(jù)治理團隊天天忙忙碌碌的扒怖,領(lǐng)導也不知道“這伙人”到底都在干啥较锡?但是,只要數(shù)據(jù)出現(xiàn)問題盗痒,第一個被問責的就是數(shù)據(jù)治理團隊蚂蕴。
?數(shù)據(jù)治理不是一個“項目”低散,想要立竿見影的效果?難骡楼!?
項目是一系列獨特的熔号、復雜的并相互關(guān)聯(lián)的活動,這些活動有著一個明確的目標或目的鸟整,必須在特定的時間引镊、預(yù)算、資源限定內(nèi)篮条,依據(jù)規(guī)范完成弟头。
那么,數(shù)據(jù)治理是項目嗎兑燥?
是亮瓷,當然是。
不論是全面的資產(chǎn)管理降瞳,還是針對特定領(lǐng)域的數(shù)據(jù)治理嘱支,都需要組建項目團隊、定義項目目標和范圍挣饥、制定項目計劃除师、推進項目實施、最后是項目總結(jié)和結(jié)案扔枫。數(shù)據(jù)治理有明確的目標汛聚,有特定范圍、質(zhì)量短荐、成本倚舀、時間、資源要求忍宋,從定義上講數(shù)據(jù)治理當然是項目痕貌。
但是,通過一個數(shù)據(jù)治理項目的實施糠排,即使這個項目預(yù)算很大舵稠,周期很長,是否就能解決企業(yè)數(shù)據(jù)管理和使用中的各種問題入宦?是否就能培養(yǎng)出企業(yè)的數(shù)據(jù)文化哺徊,轉(zhuǎn)變?nèi)藗兊臄?shù)字化思維?是否就能實現(xiàn)企業(yè)管理和業(yè)務(wù)模式的創(chuàng)新乾闰?
一定不可能落追!
數(shù)據(jù)治理的最終目標是賦能業(yè)務(wù),提升數(shù)據(jù)價值涯肩。這是一個持續(xù)漫長的運營過程轿钠,需要逐步完善雹熬、分步迭代,指望一步到位完成數(shù)據(jù)治理是不現(xiàn)實的谣膳。
項目型的數(shù)據(jù)治理,是不全面的铅乡,無延續(xù)性继谚,能夠解決一時的數(shù)據(jù)問題,但很難獲得持續(xù)的數(shù)據(jù)價值阵幸。因此說花履,數(shù)據(jù)治理不是一個“項目”,而是一個持續(xù)運營的過程挚赊。我們也可以將這個過程诡壁,看作是由一個個數(shù)據(jù)治理“微項目”組成,連續(xù)的荠割、螺旋上升的模型妹卿。一個項目的結(jié)案,不是企業(yè)數(shù)據(jù)治理的終點蔑鹦,而是企業(yè)數(shù)據(jù)治理真正的起點夺克!
?做了數(shù)據(jù)治理,為什么數(shù)據(jù)質(zhì)量依然很差嚎朽,咋辦铺纽?
一個網(wǎng)友留言:石老師,我們公司兩年前就做了數(shù)據(jù)治理哟忍,建立了數(shù)據(jù)治理平臺狡门,元數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量管理等功能都有了锅很,但是我們的數(shù)據(jù)質(zhì)量問題還是很多其馏,導致花了很多錢建設(shè)的BI系統(tǒng)基本都沒人用,請問有什么好的方式解決粗蔚?
這個問題尝偎,我沒有答復。原因是數(shù)據(jù)質(zhì)量差鹏控、BI用不起來致扯,這個問題雖然常見,但是10家有相同問題的企業(yè)中当辐,有9家的原因是不一樣的抖僵。在沒有經(jīng)過詳細調(diào)查,不了解具體背景的情況下缘揪,不敢貿(mào)然給出建議耍群。
我們在《數(shù)據(jù)治理系列5:數(shù)據(jù)質(zhì)量管理的正確打開方式》一文中义桂,曾盤點了引發(fā)數(shù)據(jù)質(zhì)量問題的各種原因:有業(yè)務(wù)方面的數(shù)據(jù)定義不明確,也有技術(shù)方面的數(shù)據(jù)抽取不完整蹈垢;有管理方面的崗位職責不清晰慷吊,也有執(zhí)行層面的數(shù)據(jù)操作不規(guī)范;有數(shù)據(jù)處理加工過程中出現(xiàn)了錯誤曹抬,也有數(shù)據(jù)源本身就有問題溉瓶;有數(shù)據(jù)治理系統(tǒng)功能有缺陷,也有系統(tǒng)強大但是沒人用……
做過了數(shù)據(jù)治理谤民,企業(yè)的數(shù)據(jù)質(zhì)量就一定能提升嗎堰酿?其原意是要問:上過了數(shù)據(jù)治理系統(tǒng)或?qū)嵤┝藬?shù)據(jù)治理項目,為什么還會有數(shù)據(jù)質(zhì)量問題张足。
這個問題很復雜触创。正如上文中的項目型數(shù)據(jù)治理,點到為止为牍,治標不治本哼绑。有的企業(yè)認為數(shù)據(jù)治理就是上一套強大的數(shù)據(jù)治理平臺,只要平臺功能強大吵聪,就能管好數(shù)據(jù)凌那,這恰恰是陷入了另一個誤區(qū)——唯工具論,豈不知數(shù)據(jù)治理的本質(zhì)是管理數(shù)據(jù)吟逝,而不是管理程序帽蝶、腳本和任務(wù)。另外块攒,還有很多企業(yè)是出現(xiàn)了數(shù)據(jù)問題励稳,并且對業(yè)務(wù)造成很大影響之后才去進行治理的——被動式治理,失去了治理數(shù)據(jù)的主動權(quán)囱井,常常是解決了一個問題又引出了更多的問題驹尼。
?數(shù)據(jù)治理之道是什么,要怎么做庞呕?
在筆者之前分享的《數(shù)據(jù)治理治什么新翎?在哪治?怎么治住练?》地啰、《企業(yè)數(shù)據(jù)治理十大最佳實踐》等文章中對如何開展數(shù)據(jù)治理做了比較詳細描述,有興趣的可以在本公眾號的歷史文章中查看讲逛。
前段時間亏吝,在網(wǎng)上看到一篇關(guān)于數(shù)據(jù)治理關(guān)鍵要素的總結(jié)文章怔昨,覺得寫的很好球拦,引用過來稚叹,供大家參考:
數(shù)據(jù)治理需要體系建設(shè):為發(fā)揮數(shù)據(jù)價值需要滿足三個要素:合理的平臺架構(gòu)捧弃、完善的治理服務(wù)、體系化的運營手段止喷。
根據(jù)企業(yè)的規(guī)模馆类、所屬行業(yè)、數(shù)據(jù)量等情況選擇合適的平臺架構(gòu)弹谁;治理服務(wù)需要貫穿數(shù)據(jù)全生命周期蹦掐,保證數(shù)據(jù)在采集、加工僵闯、共享、存儲藤滥、應(yīng)用整個過程中的完整性鳖粟、準確性、一致性和實效性拙绊;運營手段則應(yīng)當包括規(guī)范的優(yōu)化向图、組織的優(yōu)化、平臺的優(yōu)化以及流程的優(yōu)化等等方面标沪。
數(shù)據(jù)治理需要夯實基礎(chǔ):數(shù)據(jù)治理需要循序漸進榄攀,但在建設(shè)初期至少需要關(guān)注三個方面:數(shù)據(jù)規(guī)范、數(shù)據(jù)質(zhì)量金句、數(shù)據(jù)安全檩赢。規(guī)范化的模型管理是保障數(shù)據(jù)可以被治理的前提條件,高質(zhì)量的數(shù)據(jù)是數(shù)據(jù)可用的前提條件违寞,數(shù)據(jù)的安全管控是數(shù)據(jù)可以共享交換的前提條件贞瞒。
數(shù)據(jù)治理需要IT賦能:數(shù)據(jù)治理不是一堆規(guī)范文檔的堆砌,而是需要將治理過程中所產(chǎn)生的的規(guī)范趁曼、流程军浆、標準落地到IT平臺上,在數(shù)據(jù)生產(chǎn)過程中通過“以終為始”前向的方式進行數(shù)據(jù)治理挡闰,避免事后稽核帶來各種被動和運維成本的增加乒融。
數(shù)據(jù)治理需要聚焦數(shù)據(jù):數(shù)據(jù)治理的本質(zhì)是管理數(shù)據(jù),因此需要加強元數(shù)據(jù)管理和主數(shù)據(jù)管理摄悯,從源頭治理數(shù)據(jù)赞季,補齊數(shù)據(jù)的相關(guān)屬性和信息,比如:元數(shù)據(jù)射众、質(zhì)量碟摆、安全、業(yè)務(wù)邏輯叨橱、血緣等典蜕,通過元數(shù)據(jù)驅(qū)動的方式管理數(shù)據(jù)生產(chǎn)断盛、加工和使用。
數(shù)據(jù)治理需要建管一體化:數(shù)據(jù)模型血緣與任務(wù)調(diào)度的一致性是監(jiān)管一體化的關(guān)鍵愉舔,有助于解決數(shù)據(jù)管理與數(shù)據(jù)生產(chǎn)口徑不一致的問題钢猛,避免出現(xiàn)兩張皮的低效管理模式。
最后的話數(shù)據(jù)治理不是一蹴而就的轩缤,它是一個漫長而持續(xù)的過程命迈,沒有一針頂破天的訣竅,也沒有立竿見影的途徑火的。只有將數(shù)據(jù)治理變成一種常態(tài)化機制壶愤,就如同我們每天吃飯、睡覺一樣馏鹤,形成一種習慣征椒、一種文化、持之以恒湃累、不忘初心勃救、不懈努力,才能達到預(yù)期目標治力。