項目中遇到一次使用MD5的數(shù)據(jù)安全風險,發(fā)現(xiàn)很多同學不明白為什么MD5有泄露用戶信息風險,故而分享一下 MD5全稱為 消息摘要算法版本5 （Message Digest Al...
發(fā)簡信
IP屬地：上海
-
Rainbow-Tables -
Raft figure 2一.State ①Persistent state on all server(所有server的持久化的狀態(tài)):(Updated on stable storage bef...
-
本博客所有內(nèi)容均適用知識共享-署名-相同方式共享（CC-BY-SA）4.0協(xié)議。
-
FLP Impossibility證明過程Consensus共識的定義： termination終止性: 所有進程最終會在有限步數(shù)中結(jié)束并選取一個值, 算法不會無盡執(zhí)行下去. agreement一致性: 所有進程必須...
-
這種標題黨真惡心
因長得漂亮嫁“國外首富”，丈夫為不打擾其睡覺胰伍，切除自身器官
不管是在娛樂圈還是在現(xiàn)實生活中，很多的女生都愿嫁給一個比較有錢的富人酸休，因為嫁給他們之后就會衣食無憂骂租，甚至連工作都可以不做，但是很多人都以為這種愛情是不會長久的斑司，似乎就像是這些...
-
-
Hive優(yōu)化之多count（distinct）
本篇介紹Hive三種方法之景，優(yōu)化多count(distinct ) 先上待優(yōu)化代碼： select count(distinct sid) as sid ,count(d...
-
count(1) 與count(*)有性能差別么？
無數(shù)次聽到“不要寫count(*)要寫count(1)冤今，count（*）跑得慢”這種錯誤說法闺兢。 為什么count（1）與count（*）性能相同呢？因為執(zhí)行計劃相同戏罢，性能相同...
-
一招暴力優(yōu)化Hive SQL
快速優(yōu)化中間表過多的Job 分析師/運營 不懂技術如何優(yōu)化Hive sql屋谭？技術文章巴拉巴拉一大堆看不懂怎么辦？某互聯(lián)網(wǎng)資深數(shù)據(jù)開發(fā)寫了一百頁的PPT來科普SQL優(yōu)化效果不佳...
-
Hive優(yōu)化之笛卡爾積優(yōu)化（三） 大表Join大表+數(shù)據(jù)傾斜
本篇講解Hive大表N：N關聯(lián)的小笛卡爾積+數(shù)據(jù)傾斜的優(yōu)化方法 上一篇SMB Join發(fā)現(xiàn)卡在一個map龟糕，看日志發(fā)現(xiàn)comm_id=102073766數(shù)據(jù)量很大,檢查數(shù)據(jù)分布...
-
Hive優(yōu)化之笛卡爾積優(yōu)化（二） 大表 Join 大表
本篇以實例介紹如何優(yōu)化Hive大表關聯(lián)大表 小笛卡爾積如何優(yōu)化 如果是沒有關聯(lián)條件的大笛卡爾積,是沒法做優(yōu)化的,如果是N:N join的小笛卡爾積,Hive有SMB Join...
-
Hive優(yōu)化之笛卡爾積優(yōu)化（一）
本篇以實例介紹如何優(yōu)化Hive大表關聯(lián)小表笛卡爾積如何優(yōu)化 優(yōu)化：1.分析代碼 2.查看數(shù)據(jù) set hive.mapred.mode=nonstrict; create t...
