一宠页、Kafka的三大組件：Producer茎芋、Server、Consumer 1彩库、Kafka的Producer寫入消息 producer采用push（推）模式將消息發(fā)布到bro...
IP屬地：北京
-
【大數(shù)據(jù)技術(shù)】kafka簡介和底層實(shí)現(xiàn) -
【大數(shù)據(jù)技術(shù)】HDFS原理性知識總結(jié)一穆碎、HDFS現(xiàn)有不足： 1、不適低延時(shí)數(shù)據(jù)訪問2论泛、無法高效的大量小文件進(jìn)行存儲出現(xiàn)原因：· 小文件會占用NameNode大量內(nèi)存來存儲該文件的目錄和塊信息揩尸，每個(gè)小文件需要15...
-
JVM內(nèi)存模型和GC的解析JVM調(diào)優(yōu)是調(diào)整：方法區(qū)和堆（主要是堆） 棧管運(yùn)行，堆管存儲 堆和方法區(qū)是所有線程共享的內(nèi)存區(qū)域屁奏；棧和程序計(jì)數(shù)器是每個(gè)線程私有的內(nèi)存區(qū)域岩榆。注：由于棧是每個(gè)線程私有的，椃仄埃空間是...
-
【大數(shù)據(jù)技術(shù)】Flume - 基于source原理 自定義MySQL-source
SQLSourceHelper package com.laichong.source;import org.apache.flume.Context;import org....
-
【大數(shù)據(jù)技術(shù)】flume架構(gòu)和應(yīng)用一勇边、flume架構(gòu) 一個(gè)flume進(jìn)程分為三個(gè)部分：source、channel载绿、sink粥诫，總體稱為一個(gè)Agent，是一個(gè)JVM進(jìn)程 1）source 作用：讀取數(shù)據(jù)崭庸，傳送（...
-
JVM和GC的簡單解析為了最近面試执赡，特意整理了一下多年前的筆記，再次分享給大家(適用于hotStop的_1.7/1.8) · JVM調(diào)優(yōu)是調(diào)整：方法區(qū)和堆（主要是堆） · 棧管運(yùn)行函筋，堆管存儲 · ...
-
HBase從入門到放棄HBase解決了什么問題： 1）HBase主要解決在Hdfs上可以隨機(jī)讀寫的問題 2）Hive只能查詢沙合，不能隨機(jī)讀寫 一、HBase依賴于Zookeeper和HDFS 1）Z...
-
點(diǎn)點(diǎn)滴滴的瑣碎/迭代更新著意識
-
評論較多究履，簡書回復(fù)也不太方便滤否，如有問題麻煩關(guān)注下面的公眾號，加入我的微信群一起討論最仑。公眾號ID：小小挖掘機(jī)
-
創(chuàng)業(yè)者，持續(xù)學(xué)習(xí)者吟吝，全棧工程師菱父，技術(shù)人。對技術(shù)開發(fā)剑逃、產(chǎn)品設(shè)計(jì)滞伟、多媒體交互有濃厚的興趣；對不同的程序設(shè)計(jì)語言炕贵，前端后端服務(wù)器，可編程硬件有濃厚興趣野崇；對電影音樂游戲称开，各種形式的藝術(shù)表現(xiàn)有濃厚的興趣；對數(shù)學(xué)物理學(xué)宇宙學(xué)心理學(xué)歷史政治社會人文有濃厚的興趣乓梨。對什么都有濃厚的興趣鳖轰，所以什么都看，什么都不精扶镀。但不以為恥蕴侣，反以為榮。夢想成為雜家臭觉，長命百歲昆雀，然后了解這個(gè)神秘的世界。
