數(shù)倉總結(jié)目錄：
說說數(shù)倉(1) - 什么是數(shù)倉
說說數(shù)倉(2) - 傳統(tǒng)數(shù)倉與互聯(lián)網(wǎng)數(shù)倉
說說數(shù)倉(3) - 數(shù)倉架構(gòu)
說說數(shù)倉(4) - 指標字典
說說數(shù)倉(5)-最重要的維度之日期維度
說說數(shù)倉(6)-關(guān)于命名規(guī)范
說說數(shù)倉(7)-淺談數(shù)據(jù)治理
說說數(shù)倉(8)-關(guān)于增量
說說數(shù)倉(9)-上下游約定
說說數(shù)倉(10)-任務注釋
話說措嵌，沒有規(guī)矩不成方圓躲叼。在搭建數(shù)據(jù)平臺的時候，在數(shù)據(jù)組內(nèi)部企巢，一定要先制定好各種規(guī)范枫慷，越早越好，并且不斷的監(jiān)督大家是否按照約定執(zhí)行浪规。一旦讓大家自由發(fā)揮或听，后期想要統(tǒng)一或者重構(gòu)，會浪費很大的人力成本和時間成本笋婿，記住誉裆，這都是坑。
這里以我目前公司的一些經(jīng)驗缸濒，分享下足丢。
關(guān)于項目
常規(guī)來說，數(shù)倉的建設是按照數(shù)倉分層模型開發(fā)的绍填。也有會按照業(yè)務線來分層霎桅，在各自業(yè)務線下重新分層，單獨開發(fā)的讨永。
我這里使用的是阿里云的MaxCompute滔驶，這是阿里提供的數(shù)據(jù)平臺，一整套開發(fā)環(huán)境卿闹，用起來還是很方便的揭糕，省去了自建平臺的麻煩。MaxCompute里面有一個項目的概念锻霎，一開始本來打算直接根據(jù)分層模型的設計來創(chuàng)建項目著角，但是由于某種原因，改成了按照業(yè)務線來創(chuàng)建項目旋恼。對于這個項目名吏口，一定要想好，不管根據(jù)什么來設計冰更，都需要想清楚产徊，想明白，定了以后就不要再改了蜀细，也沒法改舟铜。
關(guān)于詞根
我忘記是不是叫“詞根”了，先寫著奠衔，后面找本書確認下谆刨。詞根屬于數(shù)倉建設中的規(guī)范塘娶，屬于元數(shù)據(jù)管理的范疇。哦刁岸，現(xiàn)在都把這個劃到數(shù)據(jù)治理的一部分生兆。
正常來說，完整的數(shù)倉建設是包含數(shù)據(jù)治理的，只是現(xiàn)在談到數(shù)倉偏向于數(shù)據(jù)建模员淫，而談到數(shù)據(jù)治理介返，更多的是關(guān)于數(shù)據(jù)規(guī)范、數(shù)據(jù)管理刃宵。
接著說我們的主角-詞根徘公。
我們學習英語的時候應該有了解過詞根這個東西关面，它就是最細粒度的最簡單的一個詞語，我們主要用來規(guī)范中文和英文的映射關(guān)系捂齐。我們公司一部分業(yè)務是關(guān)于貨架的缩抡，英文名是：rack，rack就是一個詞根压真，那我們就在所有的表榴都、字段等用到的地方都叫rack漠其，不要叫成別的什么竿音。這就是詞根的作用春瞬，用來統(tǒng)一命名套啤，表達同一個含義。
指標體系中有很多“率”的指標萄涯，都可以拆解成XXX+率涝影，率可以叫rate争占，那我們所有的指標都叫做XXX+rate。
詞根可以用來統(tǒng)一表名伯襟、字段名姆怪、主題域名等等舆瘪。
表名
表名需要見名知意，通過表名就可以知道它是哪個業(yè)務域英古，干嘛用的，什么粒度的數(shù)據(jù)膨桥。
常規(guī)表
常規(guī)表是我們需要固化的表只嚣，是正式使用的表，是目前一段時間內(nèi)需要去維護去完善的表册舞。
規(guī)范：分層前綴[dwd|dws|ads|bi]_業(yè)務域_主題域_XXX_粒度
業(yè)務域调鲸、主題域我們都可以用詞根的方式枚舉清楚，不斷完善藐石，粒度也是同樣的，主要的是時間粒度于微、日株依、月、年雷滚、周等吗坚，使用詞根定義好簡稱呆万。中間表
中間表一般出現(xiàn)在Job中谋减，是Job中臨時存儲的中間數(shù)據(jù)的表，中間表的作用域只限于當前Job執(zhí)行過程中庄吼，Job一旦執(zhí)行完成严就，該中間表的使命就完成了，是可以刪除的（按照自己公司的場景自由選擇渐行，以前公司會保留幾天的中間表數(shù)據(jù)祟印，用來排查問題）粟害。
規(guī)范：mid_table_name_[0~9|dim]
table_name是我們?nèi)蝿罩心繕吮淼拿郑ǔ碚f一個任務只有一個目標表悲幅。
這里加上表名，是為了防止自由發(fā)揮的時候表名沖突芋哭，而末尾大家可以選擇自由發(fā)揮，起一些有意義的名字减牺，或者簡單粗暴，使用數(shù)字代替肥隆，各有優(yōu)劣吧栋艳，謹慎選擇句各。
通常會遇到需要補全維度的表，這里我喜歡使用dim結(jié)尾矾屯。
中間表在創(chuàng)建時初厚，請加上 ,如果要保留歷史的中間表，可以加上日期或者時間戳
drop table if exists table_name;
create table_name as xxx;
臨時表
臨時表是臨時測試的表排作，是臨時使用一次的表亚情，就是暫時保存下數(shù)據(jù)看看势似，后續(xù)一般不再使用的表，是可以隨時刪除的表障簿。
規(guī)范：tmp_xxx
只要加上tmp開頭即可栅迄，其他名字隨意，
注意tmp開頭的表不要用來實際使用，只是測試驗證而已愈腾。維度表
維度表是基于底層數(shù)據(jù)岂津，抽象出來的描述類的表。維度表可以自動從底層表抽象出來橱乱，也可以手工來維護泳叠。
規(guī)范：dim_xxx
維度表茶宵，統(tǒng)一以dim開頭，后面加上种蝶，對該指標的描述蛤吓，可以自由發(fā)揮糠赦。手工表
手工表是手工維護的表拙泽，手工初始化一次之后顾瞻，一般不會自動改變德绿，后面變更，也是手工來維護蕴纳。
一般來說古毛，手工的數(shù)據(jù)粒度是偏細的，所以嫂冻，暫時我們統(tǒng)一放在dwd層塞椎，后面如果有目標值或者其他類型手工數(shù)據(jù)案狠，再根據(jù)實際情況分層。
規(guī)范：dwd_業(yè)務域_manual_xxx
手工表伴嗡，增加特殊的主題域瘪校，manual名段，表示手工維護表
指標
指標的命名也參考詞根阱扬，避免出現(xiàn)同一個指標麻惶，10個人有10個命名方法窃蹋。
后記
具體操作結(jié)合公司實際情況静稻，規(guī)范及早制定。
附
附上之前我們再阿里DataWorks上的一個規(guī)范示例
