概述： 簡述數(shù)據(jù)倉庫、數(shù)據(jù)湖笋籽、數(shù)據(jù)中臺的相關(guān)概念柿菩。 一、數(shù)據(jù)倉庫： 1蹭睡、定義： 數(shù)據(jù)倉庫之父 W.H.Inmon 定義數(shù)倉： 2衍菱、數(shù)倉價值： 實現(xiàn)跨業(yè)務(wù)條線、跨系統(tǒng)的數(shù)據(jù)整...
發(fā)簡信
IP屬地：陜西
-
簡述：數(shù)據(jù)中臺、數(shù)據(jù)倉庫譬圣、數(shù)據(jù)湖
-
Redis-基礎(chǔ)知識
1肩豁、數(shù)據(jù)類型 （1）基本數(shù)據(jù)類型 （2） String 常見操作 單數(shù)據(jù)操作與多數(shù)據(jù)操作：多數(shù)據(jù)操作時mset理論上優(yōu)于get脊串，但因Redis是單線程，在多數(shù)據(jù)操作數(shù)據(jù)量極大...
-
Redis企業(yè)級場景
1清钥、緩存預(yù)熱 （1）問題排查 請求數(shù)量較高 主從之間數(shù)據(jù)吞吐量較大琼锋，數(shù)據(jù)同步操作頻度較高 （2）解決方案 緩存預(yù)熱就是在系統(tǒng)啟動時，提前將相關(guān)的緩存數(shù)據(jù)加載到 Redis 中...
-
Flink Dag簡述
Flink Dag 1祟昭、流程簡圖 2缕坎、流程簡述 ① API : StreamAPI: 實時流 API BatchApI : 批處理 API ② StreamGraph: 根據(jù)...
-
Flink State Backend
State Backend 說明： 默認(rèn)情況下，State 會保存在 TaskManager 的內(nèi)存中董栽，CheckPoint 會存儲在 JobManager 的內(nèi)存中码倦。（也就...
-
-
Shell-Crontab調(diào)度任務(wù)
1袁稽、調(diào)度任務(wù) （1）系統(tǒng)任務(wù)調(diào)度 說明: 系統(tǒng)周期性所要執(zhí)行的工作，比如寫緩存數(shù)據(jù)到硬盤擒抛、日志清理等; 配置文件：配置文件說明： (2) 用戶任務(wù)調(diào)度 說明： 用戶自定義需要...
-
Shell-Bash變量與運算符
1推汽、Bash中變量定義的規(guī)則 說明： 變量名稱，有字母歧沪，數(shù)字和下劃線組成歹撒，但是不能以數(shù)字開頭 在 Bash 中變量的默認(rèn)類型是字符串類型，如果需要定義數(shù)值類型需要特殊聲明 變...
-
Shell-編程基礎(chǔ)
1诊胞、Shell概述 （1）Shell說明： Shell 就是命令解釋器暖夭，而shell Script 是利用 shell 所寫的一個程序 簡單理解就是將多個指令匯集在一起，然后...
-
Kafka流程分析-生產(chǎn)者
Kafka 工作流程分析 1撵孤、Kafka生產(chǎn)過程分析 （1）寫入方式 producer采用推（push）模式將消息發(fā)布到broker迈着，每條消息都被追加（append）到分區(qū)（...
-
Flink:DataStream類型轉(zhuǎn)換及常用算子說明
1、DataStream算子轉(zhuǎn)換概覽 2早直、DataStream轉(zhuǎn)換算子 （1）Map [DataStream->DataStream] 說明： 一對一轉(zhuǎn)換,即一條轉(zhuǎn)換成另一條...
-
Part1：kafka基礎(chǔ)知識1霞扬、kafka 名詞解釋 （1）消息： 消息是kafka中最基本的數(shù)據(jù)單元，主要由key 和 Value 構(gòu)成枫振，均為 byte數(shù)組喻圃。 （2）topic： Topic是用于存放...
