數(shù)據(jù)治理8種方法

01 矩动、 頂層設(shè)計(jì)法

顧名思義有巧,頂層設(shè)計(jì)法就是先做一個(gè)數(shù)據(jù)治理頂層設(shè)計(jì)的規(guī)劃,然后按照規(guī)劃執(zhí)行即可悲没。

做過(guò)咨詢的彭友都知道篮迎,頂層設(shè)計(jì)、戰(zhàn)略咨詢都會(huì)根據(jù)戰(zhàn)略目標(biāo)拆解KPI示姿,然后設(shè)立對(duì)應(yīng)的支撐項(xiàng)目甜橱,并且根據(jù)優(yōu)先級(jí)別進(jìn)行排序,最后形成一個(gè)執(zhí)行的路徑栈戳。

今年做什么岂傲,明年做什么,先做啥荧琼,后做啥譬胎,都規(guī)劃的清清楚楚明明白白。

之后就按圖索驥就行命锄。大致的邏輯就像下圖一樣:

這樣的好處很明顯堰乔,先有面,再有線脐恩,最后是各個(gè)點(diǎn)狀的項(xiàng)目镐侯,一點(diǎn)點(diǎn)的落實(shí),效果自然沒的說(shuō)驶冒。

但是這樣的方案是非常非常奢侈的苟翻,因?yàn)檫@種方案見效慢,對(duì)組織的要求非常非常高骗污。耐得住性子的組織很少崇猫,通常都要快速見效。

基本上也只有一些政府單位和極少數(shù)的企業(yè)使用這種方式獲得了數(shù)據(jù)治理的成功需忿。

02****技術(shù)推動(dòng)法****
有敏感的朋友已經(jīng)察覺出來(lái)了诅炉,這里叫“技術(shù)推動(dòng)法”,而不是技術(shù)引領(lǐng)啥的屋厘。

其實(shí)這種方法是絕大多數(shù)企業(yè)采用的數(shù)據(jù)治理方法涕烧。要說(shuō)原因么,其實(shí)很簡(jiǎn)單汗洒,因?yàn)閿?shù)據(jù)治理項(xiàng)目大多是在信息部門立項(xiàng)和實(shí)施的议纯。

既然是技術(shù)部門的事兒,那當(dāng)然是技術(shù)部門推動(dòng)了溢谤。講真瞻凤,我見過(guò)太多類似的事情憨攒,很少有效果很好的。

《華為數(shù)據(jù)之道》里說(shuō)要“業(yè)務(wù)主導(dǎo)”鲫构,話是真沒錯(cuò)浓恶,但幾乎沒有做到的。原因很簡(jiǎn)單结笨,屁股決定腦袋。業(yè)務(wù)負(fù)責(zé)人的主責(zé)主業(yè)是搞業(yè)務(wù)湿镀,根本不會(huì)野不可能要主動(dòng)做數(shù)據(jù)治理的事情炕吸。

技術(shù)驅(qū)動(dòng)的套路沒啥說(shuō)的,就是針對(duì)數(shù)據(jù)問(wèn)題勉痴,從技術(shù)層面進(jìn)行解決赫模。套路就是信息系統(tǒng)建設(shè)的邏輯,立個(gè)項(xiàng)蒸矛,做調(diào)研瀑罗,各種概要設(shè)計(jì)、詳細(xì)設(shè)計(jì)雏掠,各種開發(fā)斩祭、集成、測(cè)試乡话、部署摧玫,然后驗(yàn)收。

圖片

效果么绑青,一般吧诬像。因?yàn)榇蠖嗍菃?wèn)題導(dǎo)向,頻繁“打補(bǔ)丁”式的建設(shè)闸婴。到最后往往就是各種爆炸坏挠,報(bào)表爆炸,指標(biāo)爆炸邪乍,數(shù)據(jù)問(wèn)題爆炸降狠。

然后開始上指標(biāo)系統(tǒng)、數(shù)據(jù)質(zhì)量系統(tǒng)溺欧,一個(gè)補(bǔ)丁貼一個(gè)補(bǔ)丁喊熟,到最后誰(shuí)都不敢動(dòng)了。

歸根結(jié)底姐刁,就是因?yàn)閿?shù)據(jù)的問(wèn)題是一個(gè)系統(tǒng)性的芥牌,技術(shù)層面的原因只是其中之一而已。造成這種現(xiàn)象的原因就是業(yè)務(wù)參與度不夠聂使。

在企業(yè)壁拉,誰(shuí)掙錢谬俄,誰(shuí)的話語(yǔ)權(quán)就大。業(yè)務(wù)自然是利潤(rùn)中心弃理,而技術(shù)一般都是成本中心溃论。純讓技術(shù)去推動(dòng)數(shù)據(jù)治理,就像是讓兒子督促爸爸戒煙一樣不靠譜痘昌。

03****應(yīng)用牽引法****

如果說(shuō)技術(shù)推動(dòng)是小孩推車钥勋,那么應(yīng)用牽引則是壯牛拉車得心應(yīng)手啊。有應(yīng)用在前面牽引辆苔,后面的各種事情就顯得非常自然算灸。

很多企業(yè)建數(shù)據(jù)體系都喜歡先弄一個(gè)大屏不是沒有道理的。因?yàn)闆]有“用”的東西是沒有價(jià)值的驻啤。

大屏雖然用戶比較單一菲驴,實(shí)用價(jià)值比較低,但畢竟還是有使用場(chǎng)景的骑冗,比單純沒有使用場(chǎng)景的純技術(shù)開發(fā)建設(shè)強(qiáng)的不是一星半點(diǎn)赊瞬。

圖片

以數(shù)據(jù)應(yīng)用為牽引,反向要求各鏈路的數(shù)據(jù)高質(zhì)量供給贼涩,促進(jìn)數(shù)據(jù)治理體系的建設(shè)巧涧,也是一個(gè)很好的選擇。

但是這種方式做數(shù)據(jù)治理磁携,始終還是會(huì)陷入到片面褒侧、局部勝利的結(jié)果。有應(yīng)用的地方谊迄,數(shù)據(jù)質(zhì)量就能得到治理闷供,沒有應(yīng)用的數(shù)據(jù)質(zhì)量就沒人管了。

04****標(biāo)準(zhǔn)先行法****

講真统诺,標(biāo)準(zhǔn)現(xiàn)行法的真實(shí)案例我只遇到過(guò)極少數(shù)的幾個(gè)

甲方在建業(yè)務(wù)系統(tǒng)的時(shí)候歪脏,把數(shù)據(jù)標(biāo)準(zhǔn)和業(yè)務(wù)系統(tǒng)綁定起來(lái)。所以他們?cè)谧鲂畔⒒ㄔO(shè)的時(shí)候粮呢,就已經(jīng)把所有的數(shù)據(jù)標(biāo)準(zhǔn)都已經(jīng)建立好了婿失。

我過(guò)去的時(shí)候,發(fā)現(xiàn)數(shù)據(jù)治理真的就這么簡(jiǎn)單啄寡,完完全全就是一個(gè)純技術(shù)活兒豪硅,不用考慮人的因素。

所有表都是按照統(tǒng)一的數(shù)據(jù)模型建設(shè)的挺物,所有字段中的鍵值都在最新發(fā)布的數(shù)據(jù)字典里懒浮,甚至為某個(gè)“主數(shù)據(jù)”單獨(dú)建了一套管理系統(tǒng)。

我過(guò)去就是按照標(biāo)書里的要求,建庫(kù)建表砚著,開發(fā)ETL次伶,把數(shù)據(jù)收上來(lái),然后整個(gè)規(guī)則引擎稽穆,按照配置結(jié)果冠王,自動(dòng)計(jì)算數(shù)據(jù)質(zhì)量,定期出數(shù)據(jù)質(zhì)量報(bào)告舌镶。

圖片

其實(shí)為什么有那么多的數(shù)據(jù)質(zhì)量問(wèn)題柱彻?很簡(jiǎn)單,沒有標(biāo)準(zhǔn)餐胀。沒有標(biāo)準(zhǔn)就沒有對(duì)錯(cuò)绒疗,自然就會(huì)亂到一塌糊涂!

標(biāo)準(zhǔn)有了骂澄,就能確定什么是對(duì)的,什么是錯(cuò)的惕虑。后面的執(zhí)行坟冲、監(jiān)測(cè)和控制就有了依據(jù),數(shù)據(jù)質(zhì)量才有保障溃蔫。

05監(jiān)管驅(qū)動(dòng)法

這個(gè)好理解健提,就是強(qiáng)監(jiān)管

強(qiáng)監(jiān)管通常是上級(jí)單位發(fā)政策伟叛,下級(jí)單位執(zhí)行私痹。而且做不好,還會(huì)有懲罰统刮。

銀行紊遵、保險(xiǎn)等強(qiáng)監(jiān)管的行業(yè)就是跟著政策走的。不好好做數(shù)據(jù)治理侥蒙,不按照EAST暗膜、1104的要求報(bào)送數(shù)據(jù),罰單馬上就來(lái)鞭衩。

不要想著隨便糊弄学搜,有本事就造全套的假數(shù)據(jù),假的跟真的一樣的那種论衍,表間勾稽關(guān)系無(wú)誤瑞佩,各個(gè)維度都找不到破綻的那種。

當(dāng)然了坯台,在企業(yè)內(nèi)部其實(shí)也可以執(zhí)行這種強(qiáng)監(jiān)管的模式炬丸,但這需要“特權(quán)”。這個(gè)前提通常很難達(dá)到捂人。

有種取巧的方法御雕,就是貫標(biāo)矢沿。比如現(xiàn)在國(guó)家在推的DCMM貫標(biāo)。

貫標(biāo)有一個(gè)特別的好處酸纲,就是把“貫標(biāo)評(píng)級(jí)”列到組織年度目標(biāo)中捣鲸,這樣就能在企業(yè)內(nèi)部形成一個(gè)巨大的“勢(shì)能”,形成強(qiáng)監(jiān)管的態(tài)勢(shì)闽坡。

當(dāng)我們把“DCMM貫標(biāo)”這根大棒揮舞起來(lái)栽惶, 自然比某個(gè)部門或者某幾個(gè)部門推動(dòng)數(shù)據(jù)治理強(qiáng)太多了。

我們給某企業(yè)做DCMM貫標(biāo)的時(shí)候疾嗅,發(fā)現(xiàn)技術(shù)部門早就制定并頒發(fā)了數(shù)據(jù)安全的制度外厂、流程。但是跟大多數(shù)企業(yè)一樣代承,發(fā)完之后就成一紙空文了汁蝶。業(yè)務(wù)覺得安全管控太費(fèi)事了何荚,壓根就不執(zhí)行获询。

現(xiàn)在不一樣了,技術(shù)部門借著“貫標(biāo)”的理由蒂窒,要求業(yè)務(wù)貫徹執(zhí)行之前發(fā)布的制度和流程膀估。業(yè)務(wù)雖然不情不愿幔亥,但是貫標(biāo)是企業(yè)級(jí)目標(biāo),大家不得不做察纯,也就半推半就的推行起來(lái)了帕棉。

圖片

其實(shí)說(shuō)到底,監(jiān)管驅(qū)動(dòng)法饼记,就是在借勢(shì)香伴,借上級(jí)政策要求的勢(shì),借國(guó)家標(biāo)準(zhǔn)的勢(shì)握恳。用大勢(shì)推動(dòng)原本推不動(dòng)的部門瞒窒,疏通原本阻力大的流程。

06****質(zhì)量控制法****

質(zhì)量控制法其實(shí)是沒有辦法乡洼,也算是數(shù)據(jù)管理早期的雛形崇裁。因?yàn)檎f(shuō)起來(lái),數(shù)據(jù)管理理論體系往前追溯束昵,其實(shí)是來(lái)自于質(zhì)量管理體系拔稳。

ISO9000(質(zhì)量管理標(biāo)準(zhǔn)體系)、TQM(全面質(zhì)量管理體系)锹雏、CMMI(能力成熟度集成模型巴比,不只是軟件哦!),都屬于通用管理體系轻绞。

ISO9000后發(fā)展出ISO8000(數(shù)據(jù)質(zhì)量管理標(biāo)準(zhǔn)體系)采记,TQM延展出TDQM(全面數(shù)據(jù)質(zhì)量管理體系)。而CMMI協(xié)會(huì)也在2014年推出了DMM(企業(yè)數(shù)據(jù)管理能力成熟度模型)政勃。這是數(shù)據(jù)領(lǐng)域質(zhì)量管理體系唧龄。

中國(guó)則參考CMMI等一眾數(shù)據(jù)管理體系,在2018年正式發(fā)布數(shù)據(jù)管理成熟度評(píng)估模型(DCMM)國(guó)家標(biāo)準(zhǔn)奸远,這是后話了既棺。

與其他行業(yè)情況一樣,質(zhì)量是繞不過(guò)去的關(guān)懒叛。不管是做業(yè)務(wù)的丸冕,還是搞技術(shù)的,相信各位彭友沒少為數(shù)據(jù)質(zhì)量的問(wèn)題撓頭薛窥。質(zhì)量有問(wèn)題胖烛,數(shù)據(jù)就沒法用,甚至?xí)绊戝e(cuò)誤決策诅迷。

于是洪己,迫于各種數(shù)據(jù)質(zhì)量問(wèn)題,企業(yè)內(nèi)外部才認(rèn)真對(duì)待竟贯,逐步解決數(shù)據(jù)質(zhì)量問(wèn)題。

圖片

數(shù)據(jù)質(zhì)量管控很明顯逝钥,是問(wèn)題導(dǎo)向屑那。但是也不能頭疼醫(yī)頭腳疼醫(yī)腳,還得有個(gè)方法論艘款。

一般來(lái)說(shuō)得有一個(gè)具體的需求持际,包括數(shù)據(jù)質(zhì)量管控目標(biāo)、評(píng)估標(biāo)準(zhǔn)哗咆、判定規(guī)則等等蜘欲。

然后再以階段性的目標(biāo)和需求出發(fā),從事前防范晌柬、事中監(jiān)控姥份、事后核查三方面進(jìn)行質(zhì)量管控,對(duì)各類數(shù)據(jù)問(wèn)題予以解決年碘。

在解決的時(shí)候澈歉,一般會(huì)立一個(gè)數(shù)據(jù)質(zhì)量改進(jìn)的專項(xiàng),從技術(shù)屿衅、流程埃难、制度、機(jī)制等層面進(jìn)行改進(jìn),定期開展評(píng)估涡尘,對(duì)數(shù)據(jù)質(zhì)量問(wèn)題及解決辦法建立知識(shí)庫(kù)忍弛,便于之后遇到類似問(wèn)題能快速定位和解決。

在這個(gè)過(guò)程中考抄,以數(shù)據(jù)質(zhì)量問(wèn)題為牽引细疚,綜合使用元數(shù)據(jù)、主數(shù)據(jù)座泳、數(shù)據(jù)標(biāo)準(zhǔn)惠昔、制度規(guī)范等各類手段“建”以致用挑势,自然就不會(huì)出現(xiàn)用不起來(lái)的情況了镇防。

07****利益驅(qū)動(dòng)法****

利益驅(qū)動(dòng)法其實(shí)也很有意思。這是我偷偷觀察并總結(jié)的招潮饱,而且這招貌似特別好用来氧。

其實(shí)說(shuō)白了,也沒啥香拉,就是一招:以利益共享為根本啦扬,以“成就”為導(dǎo)向,建立一個(gè)符合部分核心人員****利益的目標(biāo)凫碌,然后推一下就行了扑毡。

具體的操作手法有很多,比如成功案例法盛险、合作致勝法瞄摊、評(píng)獎(jiǎng)法、出書法苦掘、會(huì)議法等换帜,還有互聯(lián)網(wǎng)企業(yè)保命大法“開源法”。

圖片

08****項(xiàng)目建設(shè)法****

這個(gè)很容易理解鹤啡,就是弄個(gè)數(shù)據(jù)治理項(xiàng)目惯驼,慢慢建設(shè)。

其實(shí)數(shù)據(jù)治理這件事情開展到現(xiàn)在递瑰,也已經(jīng)形成了一整套非常完善的流程了祟牲,相關(guān)產(chǎn)品能力也已經(jīng)非常全面了。

我之前參與的項(xiàng)目抖部,基本上覆蓋了數(shù)據(jù)全流程疲眷,什么數(shù)據(jù)咨詢、數(shù)據(jù)采集您朽、共享交換狂丝、數(shù)倉(cāng)换淆、數(shù)據(jù)標(biāo)準(zhǔn)、元數(shù)據(jù)几颜、主數(shù)據(jù)倍试、數(shù)據(jù)質(zhì)量、數(shù)據(jù)可視化蛋哭、數(shù)據(jù)分析等等县习。

目前效果比較好的,是咨詢和實(shí)施結(jié)合起來(lái)做谆趾。

做個(gè)咨詢躁愿,對(duì)數(shù)據(jù)現(xiàn)狀進(jìn)行盤點(diǎn),全面掌握企業(yè)未來(lái)的戰(zhàn)略和目前的現(xiàn)狀沪蓬,然后根據(jù)數(shù)據(jù)管理體系彤钟,做出差距分析,擬定具體執(zhí)行的工作任務(wù)跷叉,根據(jù)時(shí)間進(jìn)度安排逸雹,拆解并規(guī)劃項(xiàng)目。

然后在實(shí)施項(xiàng)目中云挟,先穿透一個(gè)場(chǎng)景梆砸,再慢慢從縱深和橫向兩個(gè)層面不斷擴(kuò)大戰(zhàn)果,建元數(shù)據(jù)园欣、主數(shù)據(jù)帖世、指標(biāo)體系、數(shù)據(jù)質(zhì)量管理體系等等沸枯,不斷夯實(shí)數(shù)據(jù)基建狮暑,為前端數(shù)據(jù)應(yīng)用提供高質(zhì)量數(shù)據(jù)供給。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末辉饱,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子拣展,更是在濱河造成了極大的恐慌彭沼,老刑警劉巖,帶你破解...
    沈念sama閱讀 206,968評(píng)論 6 482
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件备埃,死亡現(xiàn)場(chǎng)離奇詭異姓惑,居然都是意外死亡,警方通過(guò)查閱死者的電腦和手機(jī)按脚,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,601評(píng)論 2 382
  • 文/潘曉璐 我一進(jìn)店門于毙,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái),“玉大人辅搬,你說(shuō)我怎么就攤上這事唯沮〔焙担” “怎么了?”我有些...
    開封第一講書人閱讀 153,220評(píng)論 0 344
  • 文/不壞的土叔 我叫張陵介蛉,是天一觀的道長(zhǎng)萌庆。 經(jīng)常有香客問(wèn)我,道長(zhǎng)币旧,這世上最難降的妖魔是什么践险? 我笑而不...
    開封第一講書人閱讀 55,416評(píng)論 1 279
  • 正文 為了忘掉前任,我火速辦了婚禮吹菱,結(jié)果婚禮上巍虫,老公的妹妹穿的比我還像新娘。我一直安慰自己鳍刷,他們只是感情好占遥,可當(dāng)我...
    茶點(diǎn)故事閱讀 64,425評(píng)論 5 374
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著倾剿,像睡著了一般筷频。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上前痘,一...
    開封第一講書人閱讀 49,144評(píng)論 1 285
  • 那天凛捏,我揣著相機(jī)與錄音,去河邊找鬼芹缔。 笑死坯癣,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的最欠。 我是一名探鬼主播示罗,決...
    沈念sama閱讀 38,432評(píng)論 3 401
  • 文/蒼蘭香墨 我猛地睜開眼,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼芝硬!你這毒婦竟也來(lái)了蚜点?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 37,088評(píng)論 0 261
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤拌阴,失蹤者是張志新(化名)和其女友劉穎绍绘,沒想到半個(gè)月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體迟赃,經(jīng)...
    沈念sama閱讀 43,586評(píng)論 1 300
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡陪拘,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 36,028評(píng)論 2 325
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了纤壁。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片左刽。...
    茶點(diǎn)故事閱讀 38,137評(píng)論 1 334
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖酌媒,靈堂內(nèi)的尸體忽然破棺而出欠痴,到底是詐尸還是另有隱情迄靠,我是刑警寧澤,帶...
    沈念sama閱讀 33,783評(píng)論 4 324
  • 正文 年R本政府宣布斋否,位于F島的核電站梨水,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏茵臭。R本人自食惡果不足惜疫诽,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 39,343評(píng)論 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望旦委。 院中可真熱鬧奇徒,春花似錦、人聲如沸缨硝。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,333評(píng)論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)查辩。三九已至胖笛,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間宜岛,已是汗流浹背长踊。 一陣腳步聲響...
    開封第一講書人閱讀 31,559評(píng)論 1 262
  • 我被黑心中介騙來(lái)泰國(guó)打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留萍倡,地道東北人身弊。 一個(gè)月前我還...
    沈念sama閱讀 45,595評(píng)論 2 355
  • 正文 我出身青樓,卻偏偏與公主長(zhǎng)得像列敲,于是被迫代替她去往敵國(guó)和親阱佛。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 42,901評(píng)論 2 345

推薦閱讀更多精彩內(nèi)容