敏感字段標(biāo)注問(wèn)題 數(shù)據(jù)倉(cāng)庫(kù)里蹂季，多多少少會(huì)有一些敏感字段，比如用戶手機(jī)號(hào)速客、通信地址，一旦泄露危害很大五鲫。而數(shù)據(jù)倉(cāng)庫(kù)需要盡可能方便讓用戶使用溺职，同時(shí)又要保護(hù)敏感字段不能隨意訪問(wèn)，一方...
IP屬地：浙江
-
數(shù)據(jù)倉(cāng)庫(kù)敏感字段自動(dòng)識(shí)別
-
Hive表數(shù)據(jù)質(zhì)量校驗(yàn)的設(shè)計(jì)與開(kāi)發(fā)
一張Hive計(jì)算完成后位喂，開(kāi)發(fā)者會(huì)希望知道計(jì)算結(jié)果是否符合預(yù)期浪耘，比如是否有臟數(shù)據(jù)，是否數(shù)據(jù)量符合預(yù)期塑崖。這里就有兩個(gè)問(wèn)題七冲，一個(gè)是校驗(yàn)什么，另一個(gè)是怎么校驗(yàn)规婆。 校驗(yàn)什么 單個(gè)字段校...
-
掌控?cái)?shù)據(jù)倉(cāng)庫(kù)開(kāi)發(fā)的主動(dòng)權(quán)
今天團(tuán)隊(duì)在討論過(guò)去一段時(shí)間的問(wèn)題澜躺，有提到這么一個(gè)觀點(diǎn)：作為數(shù)據(jù)倉(cāng)庫(kù)工程師蝉稳，被動(dòng)接了很多需求，數(shù)據(jù)的業(yè)務(wù)價(jià)值不明顯掘鄙。 互聯(lián)網(wǎng)公司的業(yè)務(wù)變化快颠区，經(jīng)常會(huì)有產(chǎn)品上線或舊業(yè)務(wù)變更，這是...
-
給初心者的數(shù)據(jù)倉(cāng)庫(kù)元數(shù)據(jù)系統(tǒng)開(kāi)發(fā)指南加過(guò)一些數(shù)據(jù)開(kāi)發(fā)的社群通铲，經(jīng)常會(huì)有人問(wèn)元數(shù)據(jù)系統(tǒng)怎么開(kāi)發(fā)毕莱，大概網(wǎng)上很難搜到相關(guān)的好文章。 什么是元數(shù)據(jù) 首先颅夺，元數(shù)據(jù)的概念朋截，通常解釋為數(shù)據(jù)的數(shù)據(jù)，這個(gè)太難看懂了吧黄，需要換個(gè)角度解...
-
元數(shù)據(jù)系統(tǒng)的產(chǎn)品形態(tài)
上一篇 給初心者的數(shù)據(jù)倉(cāng)庫(kù)元數(shù)據(jù)系統(tǒng)開(kāi)發(fā)指南 主要是描述了元數(shù)據(jù)的基本概念和典型需求部服。實(shí)際的開(kāi)發(fā)和使用中，還有個(gè)基本問(wèn)題容易被混淆拗慨，關(guān)于元數(shù)據(jù)的產(chǎn)品形態(tài)廓八。 元數(shù)據(jù)門(mén)戶 這是最...