發(fā)簡(jiǎn)信
IP屬地：新疆
-
clickhouse寫入和副本同步過(guò)程
一： 概述 Clickhouse 插入數(shù)據(jù) Clickhouse 插入數(shù)據(jù)過(guò)程 當(dāng)需要在ReplicatedMergeTree中執(zhí)行INSERT...
-
Hadoop中Block和Split的區(qū)別
1 Block 當(dāng)我們把文件上傳到HDFS時(shí)杀怠，文件會(huì)被分塊沸枯，這個(gè)是真實(shí)物理上的劃分哪工。每塊的大小可以通過(guò)hadoop-default.xml里配置...
-
大數(shù)據(jù)之zookeeper
1： zookeeper 是什么 是一個(gè)針對(duì)大型分布式系統(tǒng)的可靠協(xié)調(diào)系統(tǒng)撇寞； 提供的功能包括：配置維護(hù)、名字服務(wù)眨八、分布式同步腺兴、組服務(wù)等； zook...
-
yarn之資源調(diào)度器1: yarn 資源調(diào)度的定義 2： yarn 資源調(diào)度的種類 在Yarn中有三種調(diào)度器可以選擇：FIFO Scheduler廉侧，Capacity...
-
mysql 外鍵那些事
FOREIGNKEYp: 外鍵約束页响，保持?jǐn)?shù)據(jù)一致性，完整性段誊。實(shí)現(xiàn)一對(duì)一或一對(duì)多關(guān)系闰蚕。 外鍵約束的要求： 1，父表和子表必須使用相同的存儲(chǔ)引擎连舍，而...
-
數(shù)據(jù)治理的定義和架構(gòu)數(shù)據(jù)治理的定義 數(shù)據(jù)治理(DataGovernance)没陡，是企業(yè)數(shù)據(jù)治理部門發(fā)起并推行的，關(guān)于如何制定和實(shí)施針對(duì)整個(gè)企業(yè)內(nèi)部數(shù)據(jù)的商業(yè)...
-
Cassandra
簡(jiǎn)介 Apache Cassandra 是一個(gè)大規(guī)乃魃停可擴(kuò)展的分布式開源NoSQL數(shù)據(jù)庫(kù)盼玄，完美適用于跨數(shù)據(jù)中心／云端的結(jié)構(gòu)化數(shù)據(jù)、半結(jié)構(gòu)化數(shù)據(jù)和非...
-
聊一聊所謂的alluxio1: alluxio是什么 Alluxio : 開源分布式內(nèi)存文件系統(tǒng)潜腻， 簡(jiǎn)而言之就是埃儿，你不用每次都從原始文件去讀，如果你的文件在alluxio...
-
Spark Streaming＋Kafka的offset管理方法
本篇主要介紹一下Spark Streaming在消費(fèi)Kafka過(guò)程中融涣，當(dāng)出現(xiàn)程序掛掉重啟后童番，找到上次消費(fèi)過(guò)的最后一次數(shù)據(jù)，確保kafka數(shù)據(jù)精確...