前言 在早期Hadoop剛出來的時(shí)候是沒有解決HDFS單點(diǎn)問題的，這就意味著當(dāng)NameNode的服務(wù)器宕機(jī)了就會(huì)導(dǎo)致整個(gè)集群癱瘓煤篙，這是非常危險(xiǎn)...

前言 在日常開發(fā)過程中使用kafka來實(shí)限流削峰作用但是往往kafka會(huì)存放多份副本來防止數(shù)據(jù)丟失，那你知道他的機(jī)制是什么樣的嗎辑奈？本篇文章就帶...

前言 Hadoop到目前為止發(fā)展已經(jīng)有10余年，版本經(jīng)過無數(shù)次的更新迭代鸠窗，目前業(yè)內(nèi)大家把Hadoop大的版本分為Hadoop1.0妓羊、Hadoo...

前言 最近在跟一位粉絲聊天，聊起來了做離線數(shù)倉時(shí)該用那些技術(shù)棧稍计。于是根據(jù)我的經(jīng)驗(yàn)和參考一些資料于就有本篇文章躁绸。在這里我會(huì)分享三個(gè)案例，僅供參考...

前言 在做實(shí)時(shí)數(shù)倉時(shí)丙猬，數(shù)據(jù)量往往比較大的涨颜，如果使用Canal來監(jiān)聽MySQL的狀態(tài)當(dāng)Canal 是單節(jié)服務(wù)時(shí)费韭，服務(wù)器掛掉是就會(huì)造成數(shù)據(jù)丟失茧球，這...

前言 上篇文章給大家講解了如何安裝一個(gè)Canal,以及講解了一部分的原理，今天我們就來深度聊一聊Canal的工作流程星持，以及他是怎么工作的抢埋，以及...

前言 當(dāng)我們做一個(gè)項(xiàng)目時(shí)往往都需要選擇該用什么技術(shù)。這一部分不是我們普通員工想的督暂，而是架構(gòu)師會(huì)根據(jù)客戶的需求選擇出合適的技術(shù)揪垄。當(dāng)選擇合適的技術(shù)...