Apache Doris 代碼倉(cāng)庫(kù)地址：apache/incubator-doris[https://github.com/apache/incubator-doris] 歡...
發(fā)簡(jiǎn)信
IP屬地：北京
-
使用 Flink CDC 實(shí)現(xiàn) MySQL 數(shù)據(jù)實(shí)時(shí)入 Apache Doris -
SQL進(jìn)階教程之1.1 case when語句case when語句書寫注意點(diǎn) 統(tǒng)一數(shù)據(jù)類型——同一字段不能出現(xiàn)不同數(shù)據(jù)類型 不要忘記end 養(yǎng)成寫子句else 用法1：group by 按照casewhen分組應(yīng)用場(chǎng)景...
-
Flink CDC 2.0 批流融合技術(shù)原理分析8月份 FlinkCDC 發(fā)布2.0.0版本，相較于1.0版本，在全量讀取階段支持分布式讀取仗岖、支持checkpoint，且在全量 + 增量讀取的過程在不鎖表的情況下保障數(shù)據(jù)一...
-
Flink Mysql CDC結(jié)合Doris flink connector實(shí)現(xiàn)數(shù)據(jù)實(shí)時(shí)入庫(kù)
Flink Mysql CDC結(jié)合Doris flink connector實(shí)現(xiàn)數(shù)據(jù)實(shí)時(shí)入庫(kù)Apache doris通過擴(kuò)展支持通過 Flink 讀寫 doris 數(shù)倉(cāng)中的數(shù)...
-
基于Apache doris怎么構(gòu)建數(shù)據(jù)中臺(tái)(五)-數(shù)據(jù)質(zhì)量管理上一次我們講了最筒，數(shù)據(jù)怎么進(jìn)行快速的接入晦鞋，這次我們講在接入及后續(xù)的數(shù)據(jù)處理中質(zhì)量怎么控制 如何更加合理谋币、高效的監(jiān)控每類作業(yè)的運(yùn)行狀態(tài)暑竟，并將原本分散斋射、孤島式的監(jiān)控日志信息通過規(guī)則...
-
基于Apache doris怎么構(gòu)建數(shù)據(jù)中臺(tái)(八)-數(shù)倉(cāng)管理數(shù)倉(cāng)分層模型 數(shù)倉(cāng)分層模型的好處： 1、數(shù)據(jù)結(jié)構(gòu)化更清晰：每一個(gè)數(shù)據(jù)分層都有它的作用域和職責(zé)但荤，在使用表的時(shí)候能更方便地定位和理解罗岖。 2、數(shù)據(jù)血緣追蹤：提供給外界使用的是一張業(yè)...
-
基于Apache-doris怎么構(gòu)建數(shù)據(jù)中臺(tái)(七)-數(shù)據(jù)指標(biāo)管理指標(biāo)體系定義 指標(biāo)體系是將零散單點(diǎn)的具有相互聯(lián)系的指標(biāo)腹躁，系統(tǒng)化的組織起來桑包，通過單點(diǎn)看全局，通過全局解決單點(diǎn)的問題纺非。它主要由指標(biāo)和體系兩部分組成哑了。 指標(biāo)是指將業(yè)務(wù)單元細(xì)分后量化...
-
基于Apache doris的元數(shù)據(jù)管理系統(tǒng)這里我們要先搞懂什么是元數(shù)據(jù)？元數(shù)據(jù)和數(shù)據(jù)的區(qū)別是什么倒信？元數(shù)據(jù)有什么作用 1.什么是元數(shù)據(jù) 舉幾個(gè)例子： 如果一本書是一個(gè)“數(shù)據(jù)"，那么它的書名泳梆、封面鳖悠、出版社、作者优妙、總頁(yè)碼就...
-
-
kafka+flink任務(wù)級(jí)順序保證順序保證難點(diǎn) 本文主要分析 CDC 業(yè)務(wù)場(chǎng)景中任務(wù)級(jí)順序保證邪意，技術(shù)選型為：debezium九妈、kafka、flink雾鬼，其構(gòu)成了順序保證中至關(guān)重要的每一環(huán)萌朱，應(yīng)該充分考慮、分析各組...
-
DorisDB 初調(diào)研之一近來接觸到DorisDB策菜，做了些調(diào)研晶疼，記錄下來酒贬。過程描述不一定準(zhǔn)備，如有描述偏差翠霍，請(qǐng)指正锭吨。 1介紹部分 1、DorisDB是什么 DorisDB重新定義了MPP分布式架構(gòu)寒匙，集...
-
TiDB(NewSQL)1. TiDB介紹 TiDB 是分布式關(guān)系型數(shù)據(jù)庫(kù)零如，是一款同時(shí)支持在線事務(wù)處理與在線分析處理的融合型分布式數(shù)據(jù)庫(kù)產(chǎn)品，具備水平擴(kuò)容或者縮容蒋情、金融級(jí)高可用埠况、云原生的分布式數(shù)據(jù)庫(kù)...
-
數(shù)據(jù)倉(cāng)庫(kù)開發(fā)規(guī)范00背景 規(guī)范約束是數(shù)倉(cāng)建設(shè)的全流程，以及后續(xù)的迭代和運(yùn)維的參照棵癣。事實(shí)上辕翰，數(shù)倉(cāng)規(guī)范文檔，應(yīng)該隨著架構(gòu)設(shè)計(jì)文檔狈谊，在數(shù)倉(cāng)開發(fā)啟動(dòng)之前喜命，分發(fā)給所有相關(guān)人員，且是所有人都必須嚴(yán)格遵守...
-
Flink+Clickhouse實(shí)時(shí)數(shù)倉(cāng)在廣投集團(tuán)的最佳實(shí)踐Flink+Clickhouse實(shí)時(shí)數(shù)倉(cāng)在廣投集團(tuán)的最佳實(shí)踐 一河劝、業(yè)務(wù)背景 由于歷史原因壁榕，大型集團(tuán)企業(yè)往往多個(gè)帳套系統(tǒng)共存，包括國(guó)內(nèi)知名ERP廠商浪潮赎瞎、用友牌里、金蝶、速達(dá)所提供...
-
今年我讀了四個(gè)開源項(xiàng)目的源碼务甥，來分享下心得Hola牡辽，我是 yes。 今年來看了 RocketMQ敞临、Kafka态辛、Dubbo 、Tomcat 的源碼挺尿，之前也有讀者詢問過如何讀源碼奏黑，索性就來分享一下。 其實(shí)還看了一點(diǎn)點(diǎn) L...
-
深度揭秘垃圾回收底層编矾，這次讓你徹底弄懂她垃圾回收兩本基礎(chǔ)經(jīng)典書籍分享：《垃圾回收的算法與實(shí)現(xiàn)》 鏈接：https://pan.baidu.com/s/16g-H9QB7-gvEJAYoclwbrA[https://...
