【必點】如何解決正面臨的各大數(shù)據(jù)集成難題蚀乔?

各位老師上午好吉挣,我是金智教育的李齊光,主要負責(zé)主數(shù)據(jù)產(chǎn)品的設(shè)計與規(guī)劃终吼,本次就這兩天出現(xiàn)的信息標(biāo)準际跪,數(shù)據(jù)集成等高頻率字眼來跟大家做一個深度分享姆打。

優(yōu)化高校數(shù)據(jù)集成勢在必行

隨著信息化不斷推進穴肘,高校對于數(shù)據(jù)的深層次需求越發(fā)強烈评抚,越來越多的應(yīng)用場景對數(shù)據(jù)的訴求也越來越高慨代。比如人事專業(yè)技術(shù)職務(wù)申報離不開科研項目侍匙,這些場景都離不開數(shù)據(jù)共享想暗,離不開數(shù)據(jù)集成帘不。

高校對數(shù)據(jù)的依賴性正在加強寞焙,數(shù)據(jù)越發(fā)凸顯,數(shù)據(jù)是高校由經(jīng)驗型決策轉(zhuǎn)向數(shù)據(jù)型決策的驅(qū)動力辽狈。我們不僅要滿足當(dāng)前的各個需求場景,還要把數(shù)據(jù)作為資源長久持續(xù)地保留下來娘扩,這也離不開數(shù)據(jù)集成。

但高校數(shù)據(jù)現(xiàn)狀卻不容樂觀,近十年的數(shù)據(jù)集成仍遺留大量問題亟待解決澎语,這些問題涉及以下部分:信息標(biāo)準建設(shè)擅羞、數(shù)據(jù)集成與共享减俏、數(shù)據(jù)存儲娃承、數(shù)據(jù)質(zhì)量历筝、長效運營等梳猪。

優(yōu)化高校數(shù)據(jù)集成勢在必行春弥,我的觀點是:高校數(shù)據(jù)集成正在由事后集成逐步向事先設(shè)計的趨勢發(fā)展匿沛。

我們先來看看 信息標(biāo)準如何建設(shè):

信息標(biāo)準建設(shè)四部曲

1、信息標(biāo)準初始建設(shè)

首先蜘渣,依托教育部標(biāo)準蔫缸,以學(xué)校人財物建設(shè)“人優(yōu)先拾碌,財和物偏后”為指導(dǎo)思想,構(gòu)建信息標(biāo)準弟跑。建設(shè)過程中以服務(wù)內(nèi)容為落腳點,明確各部門間數(shù)據(jù)提供和數(shù)據(jù)使用的供需關(guān)系饲嗽。

其次貌虾,做好萬全材料收集準備尽狠,包括:基礎(chǔ)代碼標(biāo)準晚唇、數(shù)據(jù)模式標(biāo)準哩陕、數(shù)據(jù)流向標(biāo)準悍及,高校數(shù)據(jù)應(yīng)用表格、本科教學(xué)基本狀況數(shù)據(jù)接癌,高校整體基礎(chǔ)數(shù)據(jù)采集結(jié)構(gòu)等心赶。

再次,明確數(shù)據(jù)設(shè)計規(guī)范缺猛,包括:每個表命名方式缨叫、唯一關(guān)鍵字,每次同步記錄操作的人員信息等荔燎。

另外耻姥,還需做好業(yè)務(wù)模型、主數(shù)據(jù)模型有咨、代碼標(biāo)準規(guī)范等內(nèi)容婉商。

最后挽唉,有個小建議:以上信息標(biāo)準建設(shè)工作交給1個基礎(chǔ)較好的廠商完成,學(xué)校在此基礎(chǔ)上不斷優(yōu)化落地俏险。

2、校內(nèi)信息需求調(diào)研

調(diào)研過程中不斷灌輸統(tǒng)一數(shù)據(jù)校級資產(chǎn)意識,信息中心需要不斷引導(dǎo)業(yè)務(wù)部門對數(shù)據(jù)的正確認識:數(shù)據(jù)是學(xué)校公共資源,而并非部門私有財產(chǎn),這樣良性的數(shù)據(jù)共享意識將是數(shù)據(jù)完成有效交換和集成的關(guān)鍵。

盤點好業(yè)務(wù)系統(tǒng)現(xiàn)狀以及內(nèi)外部數(shù)據(jù)關(guān)系,這部分工作以業(yè)務(wù)部門梳理為主只冻,信息中心配合舍悯。過程中一定要把握好調(diào)研的“度”:避免不調(diào)研或全面調(diào)研兩種極端方式。

3、校內(nèi)核心校標(biāo)落地:影響全局的標(biāo)準先落地(組織機構(gòu)歌径、職工號、學(xué)號等),其它隨信息化建設(shè)逐步完善榕酒,避免求大、求全。核心標(biāo)準制定后,必須召集相關(guān)執(zhí)行人員交流,確保落地辽聊。

4通砍、做好日常管控:有了初始標(biāo)準和核心校標(biāo)敛瓷,日常管控也很重要狡蝶。在新業(yè)務(wù)系統(tǒng)建設(shè)、現(xiàn)有業(yè)務(wù)系統(tǒng)集成過程中泉孩,對運行過程中的偏差都需要管控÷饔控制內(nèi)容:代碼標(biāo)準+數(shù)據(jù)模式標(biāo)準+數(shù)據(jù)流向標(biāo)準。數(shù)據(jù)質(zhì)量是設(shè)計出來的蒸辆,不是集成出來的。

標(biāo)準不是靜態(tài)的魄懂,日常管控確保信息標(biāo)準可落地與動態(tài)迭代。

多方攜手哀蘑,系統(tǒng)集成不再是老大難

1、數(shù)據(jù)集成方案

系統(tǒng)集成必須圍繞信息需求制定數(shù)據(jù)集成方案,并需結(jié)合信息標(biāo)準數(shù)據(jù)流向規(guī)劃以及業(yè)務(wù)系統(tǒng)建設(shè)使用情況來確定集成邊界怔揩。需要繼承方潦匈、信息中心未舟、業(yè)務(wù)部門,第三方公司通力配合完成毅厚。

內(nèi)容邊界一般涉及四個方面:需要的代碼標(biāo)準板乙,需要的業(yè)務(wù)數(shù)據(jù),提供的代碼標(biāo)準糊渊,提供的業(yè)務(wù)數(shù)據(jù)殷绍。

除了集成內(nèi)容邊界怔鳖,還要考慮數(shù)據(jù)集成的技術(shù)方式蹬蚁,一般有三種典型集成方式:ETL數(shù)據(jù)共享,數(shù)據(jù)庫共享和API共享挽拔,三者是互補關(guān)系浪箭。

另外,也要考慮同步頻率绸吸,實時同步锦茁,1小時/1天同步一次稿存,根據(jù)業(yè)務(wù)需求確定,夠用即可。

2、元數(shù)據(jù)注冊

元數(shù)據(jù)是理解數(shù)據(jù)的前提菩貌,是推動學(xué)校持續(xù)數(shù)據(jù)治理優(yōu)化的基礎(chǔ)卢佣,元數(shù)據(jù)注冊范圍盡可能是業(yè)務(wù)系統(tǒng)完整元數(shù)據(jù),以及涉及到共享和需要的數(shù)據(jù)及代碼表的元數(shù)據(jù)箭阶。

3珠漂、代碼標(biāo)準檢查

代碼標(biāo)準檢查依托于上面的元數(shù)據(jù),也是數(shù)據(jù)集成前代碼統(tǒng)一的有效檢查技術(shù)手段尾膊,我們可以獲取多種代碼差異媳危,在方案評審中進行評審。

4冈敛、方案評審

評審內(nèi)容:集成方案評審(主數(shù)據(jù)模式差異)待笑、代碼標(biāo)準評審(代碼標(biāo)準差異)。評審處理原則:a優(yōu)先遵循教育部標(biāo)準抓谴;b優(yōu)先遵循數(shù)據(jù)源頭標(biāo)準暮蹂;c需要信息中心、業(yè)務(wù)部門癌压、公司共同討論仰泻。

5、標(biāo)準迭代

方案評審后會帶來一系列的迭代工作滩届,公司和信息中心層面需要完成學(xué)校代碼標(biāo)準迭代集侯、學(xué)校數(shù)據(jù)模式迭代以及監(jiān)督業(yè)務(wù)系統(tǒng)迭代情況,業(yè)務(wù)部門和第三方需要完成業(yè)務(wù)系統(tǒng)代碼標(biāo)準調(diào)整以及涉及到數(shù)據(jù)內(nèi)容的清洗帜消。

6棠枉、數(shù)據(jù)集成

以公司為主,業(yè)務(wù)系統(tǒng)提供方強力配合泡挺。注意典型數(shù)據(jù)清洗轉(zhuǎn)換:

7辈讶、運行監(jiān)控

運行監(jiān)控對平臺中不規(guī)范的接口、代碼標(biāo)準不一致情況娄猫、數(shù)據(jù)質(zhì)量等問題進行監(jiān)控贱除,監(jiān)控對數(shù)據(jù)治理是非常有幫助的。

一般常見的數(shù)據(jù)質(zhì)量檢測規(guī)則如下:

事先接口涉及調(diào)用是大趨勢

這些年集成的本質(zhì)都是事后集成媳溺,重的是技術(shù)通道月幌,但是沒有重視內(nèi)容建設(shè)。

在“大平臺褂删、小應(yīng)用”的開放生態(tài)模式飞醉,平臺需要采用一體化的集成策略冲茸,內(nèi)置標(biāo)準或者數(shù)據(jù)模式和數(shù)據(jù)操作接口屯阀,把行業(yè)積累轉(zhuǎn)化為一個個領(lǐng)域模型缅帘,并以API方式對外提供,實現(xiàn)傳統(tǒng)緊耦合难衰、封閉式架構(gòu)到分布式钦无、開放架構(gòu)的轉(zhuǎn)變,實現(xiàn)從“數(shù)據(jù)集成”向“服務(wù)集成”的轉(zhuǎn)變盖袭,滿足學(xué)校業(yè)務(wù)開發(fā)快速響應(yīng)的需求失暂。

這種模式下數(shù)據(jù)訪問更及時,數(shù)據(jù)消費更真實鳄虱,建設(shè)模式更開放弟塞,可以讓更多人參與到信息化建設(shè)過程當(dāng)中。

最后想對各位始終堅持在一線的信息化從業(yè)人員致敬拙已,高校信息標(biāo)準的落地還需要靠大家共同努力决记。我的報告分享到這邊,謝謝大家~~

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末倍踪,一起剝皮案震驚了整個濱河市系宫,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌建车,老刑警劉巖扩借,帶你破解...
    沈念sama閱讀 221,695評論 6 515
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異缤至,居然都是意外死亡潮罪,警方通過查閱死者的電腦和手機,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 94,569評論 3 399
  • 文/潘曉璐 我一進店門领斥,熙熙樓的掌柜王于貴愁眉苦臉地迎上來错洁,“玉大人,你說我怎么就攤上這事戒突⊥筒辏” “怎么了?”我有些...
    開封第一講書人閱讀 168,130評論 0 360
  • 文/不壞的土叔 我叫張陵膊存,是天一觀的道長导而。 經(jīng)常有香客問我,道長隔崎,這世上最難降的妖魔是什么今艺? 我笑而不...
    開封第一講書人閱讀 59,648評論 1 297
  • 正文 為了忘掉前任,我火速辦了婚禮爵卒,結(jié)果婚禮上虚缎,老公的妹妹穿的比我還像新娘。我一直安慰自己钓株,他們只是感情好实牡,可當(dāng)我...
    茶點故事閱讀 68,655評論 6 397
  • 文/花漫 我一把揭開白布陌僵。 她就那樣靜靜地躺著,像睡著了一般创坞。 火紅的嫁衣襯著肌膚如雪碗短。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 52,268評論 1 309
  • 那天题涨,我揣著相機與錄音偎谁,去河邊找鬼。 笑死纲堵,一個胖子當(dāng)著我的面吹牛巡雨,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播席函,決...
    沈念sama閱讀 40,835評論 3 421
  • 文/蒼蘭香墨 我猛地睜開眼鸯隅,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了向挖?” 一聲冷哼從身側(cè)響起蝌以,我...
    開封第一講書人閱讀 39,740評論 0 276
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎何之,沒想到半個月后跟畅,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 46,286評論 1 318
  • 正文 獨居荒郊野嶺守林人離奇死亡溶推,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 38,375評論 3 340
  • 正文 我和宋清朗相戀三年徊件,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片蒜危。...
    茶點故事閱讀 40,505評論 1 352
  • 序言:一個原本活蹦亂跳的男人離奇死亡虱痕,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出辐赞,到底是詐尸還是另有隱情部翘,我是刑警寧澤,帶...
    沈念sama閱讀 36,185評論 5 350
  • 正文 年R本政府宣布响委,位于F島的核電站新思,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏赘风。R本人自食惡果不足惜夹囚,卻給世界環(huán)境...
    茶點故事閱讀 41,873評論 3 333
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望邀窃。 院中可真熱鬧荸哟,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,357評論 0 24
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至堰燎,卻和暖如春掏父,著一層夾襖步出監(jiān)牢的瞬間笋轨,已是汗流浹背秆剪。 一陣腳步聲響...
    開封第一講書人閱讀 33,466評論 1 272
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留爵政,地道東北人仅讽。 一個月前我還...
    沈念sama閱讀 48,921評論 3 376
  • 正文 我出身青樓,卻偏偏與公主長得像钾挟,于是被迫代替她去往敵國和親洁灵。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 45,515評論 2 359

推薦閱讀更多精彩內(nèi)容